2024年1月9日
挑战Transformer的新架构Mamba解析以及Pytorch复现
摘要： 今天我们来详细研究这篇论文“Mamba:具有选择性状态空间的线性时间序列建模” Mamba一直在人工智能界掀起波澜，被吹捧为Transformer的潜在竞争对手。到底是什么让Mamba在拥挤的序列建中脱颖而出? 在介绍之前先简要回顾一下现有的模型 Transformer:以其注意力机制而闻名，其中序 阅读全文
posted @ 2024-01-09 09:57 deephub 阅读(628) 评论(0) 推荐(0) 编辑