2024年2月18日
自然语言生成任务中的5种采样方法介绍和Pytorch代码实现
摘要： 在自然语言生成任务（NLG）中，采样方法是指从生成模型中获取文本输出的一种技术。本文将介绍常用的5中方法并用Pytorch进行实现。 束搜索（Beam Search）是贪婪解码的一种扩展，通过在每个时间步保留多个候选序列来克服贪婪解码的局部最优问题。 在每个时间步保留概率最高的前几个候选词语，然后在 阅读全文
posted @ 2024-02-18 10:47 deephub 阅读(15) 评论(0) 推荐(0) 编辑