FDU大学渣——海疯xx

摘要： RNN：难以并行 CNN：filter只能考虑局部的信息，要叠多层 Self-attention：可以考虑全局的信息，并且可以并行 （Attention Is All You Need） 示意图：x1, x2, x3, x4先embedding成a1, a2, a3, a4,然后输入到Self-At 阅读全文