2019年6月2日
word2vec改进之Hierarchical Softmax
摘要： 首先Hierarchical Softmax是word2vec的一种改进方式，因为传统的word2vec需要巨大的计算量，所以该方法主要有两个改进点： 1. 对于从输入层到隐藏层的映射，没有采取神经网络的线性变换加激活函数的方法，而是采用简单的对所有输入词向量求和并取平均的方法。 比如输入的是三个4 阅读全文
posted @ 2019-06-02 20:19 豆沙包1 阅读(464) 评论(0) 推荐(0) 编辑