2018年10月25日
Word2vec 理解
摘要： 1.有DNN做的word2vec，取隐藏层到softmax层的权重为词向量，softmax层的叶子节点数为词汇表大小 2.霍夫曼树：左边走 sigmoid(当前节点的词向量*当前节点的参数) 右边走 1-sigmoid(当前节点的词向量*当前节点的参数)，叶子节点为词汇表所有词，然后求根节点到叶子节 阅读全文
posted @ 2018-10-25 18:11 下路派出所 阅读(252) 评论(0) 推荐(0) 编辑