NLTK的基本使用
NLTK词频统计(Frequency)
import nltk tokens=[ 'my','dog','has','flea','problems','help','please', 'maybe','not','take','him','to','dog','park','stupid', 'my','dalmation','is','so','cute','I','love','him' ] #统计词频 freq = nltk.FreqDist(tokens) #输出词和相应的频率 for key,val in freq.items(): print (str(key) + ':' + str(val)) #可以把最常用的5个单词拿出来 standard_freq=freq.most_common(5) print(standard_freq)
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】凌霞软件回馈社区,博客园 & 1Panel & Halo 联合会员上线
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步