item2vec笔记

5、word2vec小结

1)CBoW vs Skip-Gram

  • CBoW更快一些。CBoW对于高频词效果较好,低频词常受到较少注意。窗口大小常5左右。
  • Skip-Gram更慢一些。Skip-Gram对于低频词效果更好,小数据下表现依旧好。窗口大小常10左右。

对于"Yesterday was really a ____ day.":
CBoW认为最可能是beautiful/nice,delightful受到较少注意;Skip-Gram则不会将delightful与beautiful/nice比较,而是作为一组新观测值。



 
 
 
posted @ 2020-01-15 18:04  yjy888  阅读(387)  评论(0编辑  收藏  举报