文件方式实现完整的英文词频统计实例
可以下载一长篇的英文小说,进行词频的分析。
1.读入待分析的字符串
2.分解提取单词
3.计数字典
4.排除语法型词汇
5.排序
6.输出TOP(20)
7.对输出结果的简要说明。
fo = open('daoru.txt','r') s = fo.read() s=s.lower() for i in ',.?': s=s.replace(i,' ') ja=s.split(' ') exp={'','a','is','the','of','to','"','and'} #排除语法型词汇 dic = {} keys=set(ja)-exp #键的集合 for i in keys: dic[i]=ja.count(i) #单词计数词典 js=list(dic.items())#单词计数元祖列表 js.sort(key=lambda x:x[1],reverse=True) #排序 for i in range(20): #输出top20 print(js[i])