随笔分类 -  自然语言处理

Transformers包使用记录
摘要：Transformers是著名的深度学习预训练模型集成库，包含NLP模型最多，CV等其他领域也有，支持预训练模型的快速使用和魔改，并且模型可以快速在不同的深度学习框架间（Pytorch/Tensorflow/Jax）无缝转移。以下记录基于HuggingFace官网教程：https://github. 阅读全文
posted @ 2023-08-19 13:54 颀周 阅读(658) 评论(0) 推荐(0) 编辑
自然语言处理NLP程序包（NLTK/spaCy）使用总结
摘要：NLTK和SpaCy是NLP的Python应用，提供了一些现成的处理工具和数据接口。下面介绍它们的一些常用功能和特性，便于对NLP研究的组成形式有一个基本的了解。 NLTK Natural Language Toolkit (NLTK) 由宾夕法尼亚大学开发，提供了超过50种语料库，以及一些常用的文 阅读全文
posted @ 2022-09-30 16:20 颀周 阅读(1941) 评论(0) 推荐(5) 编辑
NLP语言学基础
摘要：不同的自然语言有不同的语法结构，因此需要对语言数据进行语法解析，才能让机器更准确地学到相应的模式。而语言不同于图像，数据标注工作需要有一定的语言学知识，因此数据的整理也相对更困难。下面以英语为例（别的咱也看不懂），对NLP研究中常见的基本语言学概念进行记录。 词性（Part Of Speech） 词 阅读全文
posted @ 2022-09-18 20:40 颀周 阅读(311) 评论(0) 推荐(4) 编辑

很高兴能帮到你~
点赞
more_horiz
keyboard_arrow_up dark_mode palette
选择主题
点击右上角即可分享
微信分享提示