10 2024 档案

摘要:Transformer中的位置编码(Positional Encoding) 标准位置编码 原理上Transformer是无法隐式学到序列的位置信息的,为了可以处理序列问题,Transformer提出者的解决方案是使用位置编码(Position Encode/Embedding,PE) . 大致的处 阅读全文
posted @ 2024-10-19 13:11 Mintisn 阅读(642) 评论(0) 推荐(0) 编辑
摘要:基于ROS2的智能协同系统 任务一: 基础 任务 配置ubuntu环境,注意ROS版本与ubuntu版本间的对应关系 安装ROS 2框架 使用Publisher-Subscriber结构,完成两个node节点间传输数据功能 传输文字与视频 STEP: 配置Ubuntu环境 安装VMware 安装虚拟 阅读全文
posted @ 2024-10-16 16:27 Mintisn 阅读(86) 评论(0) 推荐(0) 编辑
摘要:LLM中词向量的表示和词嵌入的一些疑问 词向量的一些特点 在3blue1brown的视频【官方双语】GPT是什么?直观解释Transformer | 深度学习第5章_哔哩哔哩_bilibili中, 在15min左右介绍了LLM的词嵌入的过程. 其中提到mother的词向量减去father的词向量, 阅读全文
posted @ 2024-10-13 19:46 Mintisn 阅读(44) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示
🚀
回顶
收起