基于注意力机制

卷积神经网络(CNN):利用卷积运算操作,对原始数据进行更高层次的表达和抽象,在图像领域表现突出。

注意力机制:分为硬注意力和软注意力,硬注意力机制是筛选出受关注的区域当作输入,采用限制输入内容的处理办法,

软注意力机制以神经网络训练的权值,在空间或者通道加权,注意力模块输入可微仍可以利用反向传播进行训练。

posted @   ITJAMESKING  阅读(20)  评论(0编辑  收藏  举报
相关博文:
阅读排行:
· 震惊!C++程序真的从main开始吗?99%的程序员都答错了
· 【硬核科普】Trae如何「偷看」你的代码?零基础破解AI编程运行原理
· 单元测试从入门到精通
· 上周热点回顾(3.3-3.9)
· winform 绘制太阳,地球,月球 运作规律
点击右上角即可分享
微信分享提示