一篇关于PLM和NLG领域的综述

PLM：Pretrained Language Model 

NLG：Natural Language Generation

 

这篇文章从把文本生成的方法分成了三类：输入编码、模型设计、优化方法。

同时还从数据、模型、优化三个层面列出了文本生成的一些其他挑战。

1. N-Gram Overlap：BLEU、ROUGE、METEOR、ChrF++
2. Divesity：Distinct
3. Semantic Similarity：BERTScore

 

 

 

 

 

参考地址：https://mp.weixin.qq.com/s/Yp6a8I8Q2AiVV1DIQFO5BQ