会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
无问夕故
他问夕阳:缘何远去 夕阳不语 夕阳问他:昔日往事 他亦难言
博客园
首页
新随笔
联系
订阅
管理
2023年10月15日
Transformer
摘要: 一、注意力机制 (attention) 注意力机制其实是源自于人对于外部信息的处理能力。由于人每一时刻接受的信息都是无比的庞大且复杂,远远超过人脑的处理能力,因此人在处理信息的时候,会将注意力放在需要关注的信息上,对于其他无关的外部信息进行过滤,这种处理方式被称为注意力机制。 1. 非自主提示与自主
阅读全文
posted @ 2023-10-15 20:34 无问夕故
阅读(91)
评论(0)
推荐(0)
编辑
公告