摘要: 斯坦福NLP课程 | 第7讲 - 梯度消失问题与RNN变种 NLP课程第7讲介绍RNNs的梯度消失问题、两种新类型RNN(LSTM和GRU),以及其他梯度消失(爆炸)的解决方案——Gradient clipping、Skip connections等。 阅读全文
posted @ 2022-05-07 23:31 ShowMeAI 阅读(147) 评论(0) 推荐(0) 编辑
摘要: 斯坦福NLP课程 | 第6讲 - 循环神经网络与语言模型 NLP课程第6讲介绍一个新的NLP任务 Language Modeling (motivate RNNs) ,介绍一个新的神经网络家族 Recurrent Neural Networks (RNNs)。 阅读全文
posted @ 2022-05-07 23:15 ShowMeAI 阅读(87) 评论(0) 推荐(0) 编辑
摘要: NLP教程(5) - 语言模型、RNN、GRU与LSTM 本文介首先介绍了语言模型及其应用场景,进而介绍了循环神经网络(RNN)及优化后的变种LSTM(长短时记忆网络)和GRU模型。 阅读全文
posted @ 2022-05-07 22:33 ShowMeAI 阅读(369) 评论(0) 推荐(0) 编辑