中文词频统计及词云制作

1.中软国际华南区技术总监曾老师还会来上两次课,同学们希望曾老师讲些什么内容?(认真想一想回答)

 

2.中文分词(**两项选做,此次作业要求不能雷同。)

下载一中文长篇小说,并转换成UTF-8编码。使用jieba库,进行中文词频统计,输出TOP20的词及出现次数。

**排除一些无意义词、合并同一词。

**使用wordcloud库绘制一个词云。

复制代码
import jieba
file = open('z.txt','r').read()
z = list(jieba.cut_for_search(file))

d = {'\n',' ','。','“','”','?','!',',',':','…'}

dic={}
keys = set(z)-d
for i in keys:
    dic[i]=z.count(i)
num = list(dic.items())
num.sort(key = lambda x:x[1],reverse=True)

for i in range(20):
    print(num[i])
复制代码

 

posted @ 2017-09-25 21:18  16彭庆聪  阅读(111)  评论(0编辑  收藏  举报