2022年5月13日
transformer笔记
摘要： 由于老是忘记transformer的细节，今天整个笔记记一下，免得又忘了 一个batch 有batch_size句话，一句话有n个单词，不够就pad到n，超出就截断 嵌入层嵌入后，输出维度是[batchsize, n, d_model] 也就是每个单词的嵌入是一个(1, d_model)的向量 进入 阅读全文
posted @ 2022-05-13 21:35 王冰冰 阅读(67) 评论(0) 推荐(0) 编辑