随笔分类 - 模型算法
摘要:一、自然语言处理简介 自然语言处理(Natural Language Processing,简称NLP)是一门研究人类语言与计算机之间交互的领域,旨在使计算机能够理解、解析、生成和处理人类语言。NLP结合了计算机科学、人工智能和语言学的知识,通过各种算法和技术来处理和分析文本数据。近年来,随着深度学
阅读全文
摘要:原文:https://jalammar.github.io/illustrated-word2vec/ 作者:Jay Alammar 嵌入(embedding)是机器学习中最迷人的想法之一。 如果你曾经使用Siri、Google Assistant、Alexa、Google翻译,甚至智能手机键盘进行
阅读全文
摘要:一、注意力机制和自注意力机制的区别 Attention机制与Self-Attention机制的区别 传统的Attention机制发生在Target的元素和Source中的所有元素之间。 简单讲就是说Attention机制中的权重的计算需要Target来参与。即在Encoder-Decoder 模型中
阅读全文