02 2021 档案
摘要:本文主要介绍3种模型,分别是前向注意力(Forward Attention,FA/FA+TA),逐步单向注意力(Stepwise Monotonic Attention,SMA)和FastSpeech2,前两者都是要求注意力权重尽量保证单调向前。具体来说,假设某一解码步上的注意力权重为:\([0,0
阅读全文
随笔档案
- 2021年6月(2)
- 2021年2月(1)
- 2020年12月(1)
- 2020年10月(1)
- 2020年9月(3)
- 2020年8月(2)
- 2020年6月(1)
- 2020年2月(3)
- 2019年12月(2)
- 2019年10月(5)
- 2019年5月(1)
- 2019年4月(1)
- 2019年3月(1)
- 2019年2月(3)
- 2019年1月(3)
- 2018年12月(1)
- 2018年11月(1)
- 2018年10月(3)
- 2018年9月(1)
- 2018年8月(5)
- 2018年7月(64)
- 2017年9月(1)
- 2017年4月(18)
- 2017年2月(20)
- 2016年12月(1)
- 2016年6月(3)
- 2016年5月(2)
- 2015年12月(1)
- 2015年11月(2)
- 2015年10月(4)
- 2015年9月(9)
- 更多