2022年11月14日
RoBERTa-理论与实现
摘要： 最近学习了RoBERTa,记录一下学习内容.从论文的名字就可以看到，RoBERTa （ A Robustly Optimized BERT Pretraining Approach ）模型是BERT的改进版。我们首先对论文进行学习，然后基于PyTorch实现RoBERTa的预训练和下游任务。 论文学 阅读全文
posted @ 2022-11-14 10:57 李小隐 阅读(640) 评论(0) 推荐(0) 编辑