摘要： 一、背景 bert是一种基于transformer的结构，也就是比较经典的attention机制，bert的思维导图模型如下所示（其他人总结的）： 二、bert使用 使用bert首先需要安装transformers以及bert的模型（可以在安装完bert后使用） pip install transf 阅读全文