摘要: TF-IDF(term frequency–inverse document frequency)是一种用于信息检索与数据挖掘的常用加权技术。TF-IDF是一种统计方法,用以评估一字词对于一个文件集或一个语料库中的其中一份文件的重要程度。字词的重要性随着它在文件中出现的次数成正比增加,但同时会随着它... 阅读全文
posted @ 2015-08-04 21:23 zzblee苦瓜 阅读(143) 评论(0) 推荐(0) 编辑
摘要: 1.安装 sudo pip install jieba 或者 下了jieba后 sudo python setup.py install 如果需要permission的话2.使用1. 分词jieba.cut方法接受三个输入参数: 需要分词的字符串;cut_all 参数用来控制是否采用全模式;HMM ... 阅读全文
posted @ 2015-08-04 10:05 zzblee苦瓜 阅读(276) 评论(0) 推荐(0) 编辑