2023年6月25日
摘要: 本文主要介绍了对句子编码的过程,以及如何使用PyTorch中自带的编码工具,包括基本编码encode()、增强编码encode_plus()和批量编码batch_encode_plus()。 一.对一个句子编码例子 假设想在要对句子'the quick brown fox jumps over a 阅读全文
posted @ 2023-06-25 15:19 扫地升 阅读(208) 评论(0) 推荐(0) 编辑
摘要: 一.HuggingFace简介 1.HuggingFace是什么 可以理解为对于AI开发者的GitHub,提供了模型、数据集(文本|图像|音频|视频)、类库(比如transformers|peft|accelerate)、教程等。 2.为什么需要HuggingFace 主要是HuggingFace把 阅读全文
posted @ 2023-06-25 15:18 扫地升 阅读(2161) 评论(0) 推荐(0) 编辑