2018年10月15日
中英文分词生成词频
摘要： 英文通过空格分割，中文使用jieba分词并加载停用词表 二、中文分词 1.准备utf-8编码的文本文件file 2.通过文件读取字符串 str 3.对文本进行预处理 4.分解提取单词 list 5.单词计数字典 set , dict 6.按词频排序 list.sort(key=) 7.排除语法型词汇 阅读全文
posted @ 2018-10-15 10:46 dafeifeifei 阅读(308) 评论(0) 推荐(0) 编辑