会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
dafeifeifei
博客园
首页
新随笔
联系
管理
订阅
2018年10月15日
中英文分词生成词频
摘要: 英文通过空格分割,中文使用jieba分词并加载停用词表 二、中文分词 1.准备utf-8编码的文本文件file 2.通过文件读取字符串 str 3.对文本进行预处理 4.分解提取单词 list 5.单词计数字典 set , dict 6.按词频排序 list.sort(key=) 7.排除语法型词汇
阅读全文
posted @ 2018-10-15 10:46 dafeifeifei
阅读(308)
评论(0)
推荐(0)
编辑
公告