摘要：这是笔者学习Transformer原文后手动实践的学习笔记。本文结合原文以及部分引文分析了经典transformer的所有结构，笔者使用pytorch搭建了完整的transformer（不使用pytorch封装的transformer），并用自然语言翻译数据集进行验证。关键词：Transformer；NLP；翻译；pytorch 阅读全文