08 2023 档案

摘要:## 概述 参见:[聊聊HuggingFace](https://www.cnblogs.com/zhiyong-ITNote/p/17640835.html) ## 项目组件 一个完整的transformer模型主要包含三部分:Config、Tokenizer、Model。 ### Config 阅读全文
posted @ 2023-08-27 10:40 又见阿郎 阅读(1333) 评论(0) 推荐(0) 编辑
摘要:## 概述 HuggingFace是一个开源社区,提供了开源的AI研发框架、工具集、可在线加载的数据集仓库和预训练模型仓库。HuggingFace提出了一套可以依照的标准研发流程,按照该框架实施工程,能够在一定程度上规避开发混乱、开发人员水平不一致的问题,降低了项目实施的风险及项目和研发人员的耦合度 阅读全文
posted @ 2023-08-18 16:09 又见阿郎 阅读(900) 评论(0) 推荐(0) 编辑
摘要:摘要自《深入浅出Embedding》一问。具体详细内容请移步该书。 ## 概述 简单来说,嵌入是用向量表示一个物体,这个物体可以是一个单词、一条语句、一个序列、一件商品、一个动作、一本书、一部电影等,可以说嵌入(Embedding)涉及机器学习、深度学习的绝大部分对象。这些对象是机器学习和深度学习中 阅读全文
posted @ 2023-08-17 15:26 又见阿郎 阅读(681) 评论(0) 推荐(0) 编辑
摘要:## 语言模型 语言模型泛指:大语言模型LLM、通用模型GLM。 语言模型也是知识库。基于语言模型下的实现,比如ChatGPT,BERT,ChatGLM等等,这类知识库就像是已经人为处理好、编排好、可直接使用的知识库。 ## 知识图谱 知识图谱的定义由Google公司在2012年提出,被界定为用来提 阅读全文
posted @ 2023-08-11 09:49 又见阿郎 阅读(212) 评论(0) 推荐(0) 编辑
摘要:## 概述 自然语言处理(NLP)的正式定义:是一个使用计算机科学、人工智能(AI)和形式语言学概念来分析自然语言的研究领域。不太正式的定义表明:它是一组工具,用于从自然语言源(如web页面和文本文档)获取有意义和有用的信息。NLP工具的实现一般是基于机器学习与深度学习、其它算法(Lucene Co 阅读全文
posted @ 2023-08-06 20:06 又见阿郎 阅读(472) 评论(0) 推荐(1) 编辑

点击右上角即可分享
微信分享提示