python分词技术——jieba安装使用
jieba安装:
下载安装包,官网地址:https://pypi.org/project/jieba//
本人网盘链接:https://pan.baidu.com/s/1ufgUyYPaBv2NTUvwybH1Ew
提取码:nxed
解压安装:
首先压到任意目录
打开cmd命令行窗口并切换到jieba目录下
运行python setup.py install完成安装
用法:
import jieba.analyse path = 'D:/1.txt' fp = open(path,'r',encoding='UTF-8') content = fp.read() try: jieba.analyse.set_stop_words('D:\Program Files (x86)\Python\ku\中文停用词表.txt')#选择停用词表 tags = jieba.analyse.extract_tags(content,topK=100,withWeight=True)#content为文本信息,topK参数为提取关键词的个数 for item in tags: print(item[0]+'\t'+str(int(item[1]*1000)))#权重为小数,乘1000变为整数 finally: fp.close()
停用词表:
为止 纵然 all 例如 [④e] when 亦 来讲 谁料 届时 或多或少 不外 即使 独自 啐 反倒 =☆ you'll +ξ 哎呀 yet 从轻 切不可 举行 specified 进而 ] [②g] hello 嗡 绝 传说 despite 吧哒 临到 川流不息 心里 they're 过去 不迭 坚决 管 亲手 竟而 some 理当 最 断然 好象 此间 不下 serious their 本地 而已 和 ≈ following 不可开交 [②c] — 乘隙 咚 however 屡次三番 almost 不时 半 依照 多多少少 -- 当头 距 刚巧 喽 上去 假如 后 changes 任 叮咚 独 came 如此等等 切切 也是 对比 )、 注意 ⑨ taken 以后 × 能 [③c] wherever thence 两者 顺着 gone 宣布 5:0 伟大 互相 尽管 恰巧 几度 嗬 what 刚才 总结 故此 ≈ 使得 顷刻间 [①⑤] got 相等 适应 屡 怪不得 不免 也罢 ⑩ these 这样 ignored you're 够瞧的 [③g] ok 来自 the 存心 fifth they've 2 略加 立地 我的 of behind 不胜 many 假若 打 ~~~~ 白白 specifying 就要 拿 率尔 表示 多么 2 below weren't ③] 反手 极为 如上 [②⑦] theirs 一 本 复杂 ^ 长线 there 凡 毫无保留地 <φ 更进一步 让 分期 * 不可抗拒 尔尔 除此以外 ㈧ 近年来 于 就算 理应 furthermore 不要 因为 doesn't 不若 人人 ’ 大多数 不单 [②②] 砰 它是 [②⑤] ~+ 且不说 前此 =( } namely amongst 矣乎 <λ 今年 anyone 除了 具体地说 尽早 尽量 诸如 containing 今後 旁人 其 do self our 依 蛮 鄙人 indicated [②B] whereby 倒不如 以来 次第 达旦 less 是不是 yourselves shall 应用 A ~ 〈 明显 allow 那边 sorry 7 难得 尽心尽力 & ours 您们 too 强调 一何 齐 from [⑨] a] 就是了 规定 也就是说 [⑤e] my 为了 彻夜 出 来 eg 日臻 不满 如下 仍旧 满足 各个 如若 moreover 主张 mostly anywhere 为什麽 认为 从未 极 方 地 今后 同时 们 say 上来 决非 通过 hence 一次 其它 :: 严重 tried 左右 much 因此 千万 伙同 快 近几年来 如次 不论 ` third formerly 但 嘻 now 还有 by 绝顶 嘘 [②b] exp 巴 难道说 其一 here 人 周围 ( 始而 in 三 个别 恰恰相反 哪怕 =- 按期 扩大 千万千万 策略地 不对 每年 nothing ’‘ 起 话说 upon 猛然间 = 别 打开天窗说亮话 instead 边 不已 什么 乘虚 want | 则 替 局外 knows 抽冷子 的话 立马 若是 表明 认识 多亏 定 [②a] 上 where's 当下 何必 乃至 不止一次 从来 倍感 呜 tends right 是 当时 非常 哈哈 趁热 人民 没有 切 获得 这些 有力 除却 off goes whoever known 概 may asking 避免 暗中 [①①] “ ' everything + 二话没说 从此以后 莫不 ② 哎哟 brief just 吧 不得 ▲ 本人 nine 不怎么 何苦 ? consequently clearly th whereas 一致 否则 尽 这么样 这种 went 一方面 , able 屡次 我们 日复一日 near 运用 另行 $ 较 即刻 regardless they'd 4 there's 论 今天 useful [①o] 弗 曾 sometimes 有利 is 又及 这儿 通常 am 成心 -- least 将近 强烈 据实 准备 俺 显然 already 失去 犹且 当地 最後 随着 thru unlikely 借此 了 何须 吓 不但 随 won't anyway currently 藉以 ××× more 乘机 不妨 甚么 倘若 公然 不惟 甚或 你是 有的是 更加 一些 由此 R.L. 大批 -- 后来 首先 a's 此外 0:2 呸 总之 [②⑧] . 的 to might 一直 宁可 thoroughly 不力 上面 范围 当场 et 何尝 八成 per saying / once -β 呢 之 among un 从小 忽然 矣哉 everywhere 挨门逐户 权时 indicate 进行 其次 得起 怕 [③d] 唯有 不同 大家 take seem 她的 appreciate contains 二话不说 此次 let 反映 如同 / ① 似的 相当 大约 awfully herself [②c] 哦 请勿 12% 里面 Δ ng昉 望 either 背地里 转动 挨次 慢说 0:2 zt both does → causes has 好 hardly 莫如 按照 哗 used 大举 哎 连 更为 whither looking 与此同时 啪达 必定 一则 啷当 恰如 起先 或是 毫不 换言之 大张旗鼓 以及 从中 某些 ={ 上下 既是 赶 敢 be 勃然 thank whether please 每个 [①c] 从无到有 四 重要 <± 防止 ——— 之所以 极端 0 将 自后 yourself 怎么 不比 基于 结果 9 当 这般 i'm 凭 连日 [ 那么样 简而言之 乃 于是 甭 该 seeming them it 成为 从优 何以 不能不 单纯 大多 赖以 逐渐 here's 一片 碰巧 汝 ex 加上 诸 隔日 placed 穷年累月 $ had 下面 之一 加强 换句话说 直到 我是 hither through 召开 竟然 嗳 若果 反之则 绝对 一旦 ! # 方面 而况 其余 大不了 haven't 广大 比起 若 从不 何妨 诚如 后面 矣 难道 ~ 充其极 古来 nearly 不可 wasn't 间或 个 却 以为 单 consider 坚持 see 别处 downwards become [①A] 啊 反而 那么些 we've 乌乎 先不先 —— greetings every ! 迫于 ,也 last 允许 率然 would 特点 』 下列 尽快 之后 several 甚而 ” | * 即将 哪 hadn't 非独 人家 毕竟 相对而言 截至 咋 zero wouldn't 很少 necessary corresponding particular next 限制 全力 当庭 而且 咦 specify whom somewhere 看来 有著 历 her 敢于 ZT 哗啦 从 多次 无 末##末 非但 些 」 不少 unfortunately 设或 不料 按 出于 out 这一来 应当 密切 appropriate unless 行动 …………………………………………………③ 仅 只消 why 何处 却不 不变 ]∧′=[ hereupon 保管 常常 [①③] 〕〔 紧接着 someone 最好 先後 可见 except wherein also 引起 并 俺们 别管 can whenever it'll 另一方面 交口 保持 [②③] tries 决定 必要 [①⑥] 保险 everybody going 嘿嘿 反应 nowhere 关于 牢牢 根本 。 为主 不足 深入 看见 路经 whereafter 用来 是的 过来 单单 [② 着 初 皆可 something you'd 有些 somewhat 较比 [⑩] В somehow 谁 针对 要求 its 不敢 indicates later together whereupon 莫若 其他 某个 尽如人意 contain 连日来 仍然 不巧 merely 正在 从早到晚 且说 巨大 假使 ,也 别人 somebody 怎 [③①] 严格 果真 由于 纵令 据我所知 于是乎 社会主义 切莫 如果 何 这麽 cant 相应 与其说 串行 # 安全 便 这会儿 who who's 不怕 极了 附近 反过来 争取 with 到头 遵照 ++ 不够 莫非 除开 不亦乐乎 即便 倘 being [②j] 自 [⑤]] 被 多多益善 come 好的 转变 certain non 近来 不成 几 或许 whatever 哉 零 nevertheless // particularly 常言说得好 ⑧ 均 类如 岂但 along 是否 并没 而 cannot . as 比 2.3% 看上去 五 它 接著 不外乎 并无 离 个人 对方 除外 another [②①] [④a] 缕缕 selves =[ 凑巧 再者说 novel 怎么办 哇 哼 真正 莫不然 _ 有的 您 obviously 如此 略 respectively 并没有 宁 挨家挨户 不大 拦腰 就 岂止 当中 us 1. ; 不得已 分头 默然 故 concerning 不择手段 不知不觉 一定 倘或 贼死 她 and 而外 reasonably 彼时 re 遇到 normally look 尽然 焉 [⑦] can't ? ⑤ 要不是 练习 数/ 奋勇 becoming 非徒 就是说 以免 few 各地 × 一一 believe 明确 一天 以致 多数 普遍 因了 另悉 嗯 而又 尚且 虽说 既 加入 well 顿时 [⑤f] sup [⑤] certainly 巴巴 行为 来得及 yours indeed nor 乃至于 则甚 三番五次 不特 只是 临 neither 并肩 哩 could 多年前 前后 当真 呗 具体 较为 各自 then 陡然 以 tell 成年 已矣 不 trying … 相同 不但...而且 云云 积极 全都 後面 瑟瑟 那样 各级 ought 必须 viz 只怕 正巧 起头 toward + 倘然 如期 so 千 方能 如常 随著 怪 〕 no : 不独 惯常 日见 happens 几经 对应 少数 let's me because 敞开儿 只 having 第二 诚然 beside get 先后 简直 [①] mainly 当着 一下 特殊 甫 有关 down << i'd 立时 不拘 然而 [④c] 其二 3 因而 每每 [④b] via 如何 目前 便于 曾经 Ψ 此处 9 各式 作为 hers 再次 从此 得到 [*] we're 1. .日 这里 高低 mean 比照 他们 故意 开始 μ 啥 φ 趁 会 而后 继而 存在 理该 outside 所有 沿着 联袂 猛然 并不 没奈何 an 朝着 而言 him 逢 0 亲身 lest former ℃ >> 合理 γ 论说 专门 [②⑩] [③b] 上升 得出 如前所述 那般 腾 自各儿 不起 马上 一边 当口儿 意思 似乎 就是 相对 随后 不止 don't only provides 别说 这点 使 高兴 由是 什麽 同一 此时 以下 ................... 较之 要不然 ′| 前面 及 归根结底 叫做 很多 您是 扑通 叫 前进 不管 每时每刻 appear whence 大都 everyone 如 一起 但愿 豁然 better 最大 大抵 之前 除 达到 6 总而言之 以外 几番 rather 有及 即令 『 besides 已经 起初 越是 [⑤b] [⑥] have 弹指之间 常 uses presumably 它的 因着 万一 其实 集中 seemed 这时 keeps 代替 5 b] ↑ 挨门挨户 要不 但是 之类 以至 简言之 的确 onto name [①g] 所以 exp allows each did 喂 they'll within 大体 那麽 wish welcome 下 属于 开展 连同 起首 ( 挨着 时候 往往 为此 不久 继之 固 除此 清楚 thanks .日 从今以后 这么点儿 必将 according · 完全 -[*]- 大致 不然的话 eight 归根到底 不问 奈 available you've 从事 略微 other 此后 lately others 切勿 分别 多少 one five 动不动 有时 Ⅲ plus 怎么样 think 知道 ℃ f] 不由得 起来 ZZ A ][ 随时 regarding 乘 同 以期 though 哪年 一来 并排 出去 可 说明 [①⑦] 再 岂 likely secondly 总的来看 趁着 相似 重大 always best [①f] none possible while 臭 非得 极度 5 whole 看出 ones 纯 thanx 已 战斗 ./ 既...又 beyond 然 beforehand that's 哼唷 [①d] 看起来 associated above Lex 得 given 反之 造成 接连不断 不是 [①h] 还是 中小 最后 在于 看 甚至于 从新 我 略为 虽则 竟 不管怎样 直接 按说 每天 现代 anybody 恰似 常言说 顶多 seeing otherwise 再有 据称 }> 种 陈年 new 3 绝非 said )÷(1- 凡是 移动 说说 are 并且 谁人 became 介于 广泛 although 再则 该当 不必 不能 儿 不了 for it's saw 平素 尽可能 go 何止 另 described 一切 三番两次 谨 away 容易 取得 he's ie ③ 老 这么 才 second hereafter 还 《 不仅...而且 归齐 way 得天独厚 总是 轰然 都 她们 岂非 took old 当儿 怎样 活 巩固 -- 喔唷 甚且 反之亦然 显著 或曰 without 无论 全身心 喏 迄 ask therefore across 只要 按时 ∈[ didn't 除非 产生 毋宁 累年 过 themselves 照 喀 除去 4 ain't 倒不如说 you far <Δ we 有 % 不定 使用 ■ 长此下去 {- 问题 此 背靠背 thereafter 乘势 else 》), 乎 从重 形成 inward noone alone aside 尔等 } 将要 regards 挨个 遭到 he 那儿 抑或 on 冒 呆呆地 实际 [②h] 全体 进来 sensible 为什么 别的 多多 累次 而论 不会 连连 啊哈 奇 由 见 entirely 吱 comes 又 况且 @ 朝 欢迎 gotten isn't under 因 省得 okay 急匆匆 followed howbeit 能否 enough 差不多 丰富 他 确定 顺 ; 及其 据说 及至 亲口 即是说 下来 谁知 部分 从古至今 your 每逢 不限 seems 可以 譬如 结合 遵循 比方 精光 during 到 doing 〉 待到 从古到今 anything 至若 难怪 herein [①⑧] 以至于 它们 赶快 依靠 but 吗 keep 光 连声 要是 needs 据 thereby 归 日渐 起见 > 给 ] 孰知 [②G] 大事 use forth 并不是 多年来 thereupon ⑥ elsewhere couldn't 呼哧 LI 到目前为止 unto 待 元/吨 纵使 为 [②④ 充分 since 且 theres 觉得 只当 [②e] [⑧] 一般 大量 那些 彼 will 而是 any over 是以 看到 probably 设使 或则 放量 really 虽 仅仅 himself 实现 itself 彼此 总的来说 正如 自个儿 or 兮 到头来 二来 》 原来 己 不光 各 借 每 那 thorough 至今 ever 促进 白 屡屡 满 赶早不赶晚 倒是 were 开外 迅速 处理 靠 正值 经常 哪些 良好 尔后 = 用 差一点 try kept 要 ZXFITL 以便 惟其 然后 edu 极其 只有 反倒是 …… 做到 wants sub 进入 多 真是 为着 φ. 饱 que 某某 truly 凭借 并非 three 但凡 呕 固然 especially 各人 虽然 apart 不过 _ 殆 嘿 啊哟 叮当 哈 可是 基本上 具体来说 趁机 为何 适当 以故 cause 以後 适用 与 一. 前者 gets different 凝神 不日 各位 尽心竭力 变成 latter t's 互 如今 > 倘使 本身 >λ ourselves 昂然 进步 between six 接下来 无宁 既然 & 日益 果然 顷 before sometime 亲眼 own 兼之 任凭 其后 无法 [②d] 哪里 趁势 更 加之 definitely further 恐怕 such [②⑥] 方便 一转眼 毫无 不仅 本着 [③e] ltd 从严 不断 嘎登 一番 .一 不至于 呀 对于 般的 seriously 不一 很 [④d] 【 九 阿 ~± exactly 将才 若夫 we'd 反过来说 老大 最高 呵呵 [①C] 所 ④ 中间 说来 two 许多 有所 姑且 突出 哪边 哪样 ∪φ∈ 某 罢了 然後 perhaps [⑤a] 暗自 等等 不如 =″ 匆匆 、 孰料 何乐而不为 c] { 据此 不得不 four aren't meanwhile 仍 < 从而 同样 常言道 内 维持 或者 偏偏 隔夜 重新 immediate 继续 大面儿上 傥然 能够 that 这次 尤其 它们的 自身 共同 任何 first ”, 後来 趁早 quite 第 it'd liked 考虑 致 正常 against @ 去 敢情 那会儿 等到 自家 进去 this 恍然 举凡 ‘ [③] towards 把 co 二 光是 再说 [①i] 刚好 唉 即或 follows inasmuch c's 再其次 Lex until 成年累月 ’‘ 出来 thus e] 来着 沿 啦 ]∧′=[ 这个 那么 具体说来 得了 了解 好在 经过 沙沙 极大 今 犹自 纵 企图 [①E] [②B] , 大概 at 应该 当然 hereby oh never 只限 那个 咳 i've example actually [⑨] 嗡嗡 传闻 对待 向使 跟 overall 不然 默默地 c'mon his . help 哪儿 除此而外 既往 刚 愤然 [②f] \ 以前 been com 来说 老老实实 乘胜 about ) 哪个 ...... 相反 latterly 从宽 呼啦 怎麽 if 取道 冲 most must 漫说 [①②] 6 过于 至于 忽地 若非 逐步 大力 如是 [ 非特 另外 大 看看 ... 就地 加以 ) yes 咱们 比及 充其量 after little 哟 必 主要 顷刻 ? 老是 ── 此中 一面 另一个 暗地里 连袂 1 嘎 hopefully 风雨无阻 8 " 立即 course says [①a] insofar 之後 尔 在 getting same 〔 know 偶而 来不及 人们 嘛 seven looks 从头 他人 这 究竟 若果 决不 : 借以 恰恰 5:0 基本 considering 到处 掌握 如其 像 zz 不仅仅 .数 那时 qv 不经意 动辄 尽管如此 than 1 毫无例外 近 完成 几时 极力 三天两头 经 value shouldn't 等 etc 怎奈 宁肯 [①D] 任务 < throughout where 小 各种 据悉 - 格外 设若 着呢 联系 恰逢 wonder 眨眼 how :// 全年 ⑦ 共 anyhow 居然 绝不 你 甚至 根据 twice 这边 gives therein [] becomes 其中 才能 呐 大凡 [①⑨] 迟早 inc [①B] .. 不尽 全然 这就是说 纯粹 粗 nobody 从速 哪天 正是 到底 we'll very 特别是 看样子 每当 不只 此地 seen whose ××× 全部 如上所述 整个 诸位 like 大大 彻底 他是 需要 [③F] 偶尔 一样 替代 around ㈧ 愿意 大略 自从 不得了 继后 七 那里 可好 十分 一个 受到 组成 故而 [③h] [②i] ' 你们 处在 与否 接着 nd 啊呀 亲自 先生 相信 up 上述 一则通过 不曾 除此之外 自打 what's 分期分批 庶几 still 具有 [- not 她是 afterwards 即若 again 来看 anyways 7 及时 帮助 不再 或 现在 云尔 立刻 sent 何况 余外 [③a] 方才 倍加 年复一年 比如说 另方面 嘎嘎 i'll 还要 鉴于 截然 往 they 带 [①e] 出现 need 呵 8 莫 向着 在下 she rd 六 using 由此可见 向 照着 全面 various % vs ∈[ 传 趁便 所谓 accordingly 对 按理 willing 然则 梆 usually 这么些 长话短说 长期以来 咱 即 relatively 没 不仅仅是 所在 窃 ′∈ 者 一时 even 难说 should 可能 打从 有着 hi myself 宁愿 突然 [⑤d] 总的说来 often 采取 以上 呜呼 有点 不尽然 处处 [④] 普通 [①④] 后者 颇 thats 认真 譬喻 依据 综上所述 八 那末 inner 立 共总 至 sure hasn't - 不常 不消 要么 [②] into 何时 即如 顷刻之间 再者 别是 恰好 咧 也好 庶乎 those 么 与其 构成 呃 was 双方 下去 当即 自己 乒 也 你的 比较 必然 大体上 几乎 ︿ 有效 他的 到了儿 ②c 就此 所幸 转贴 】 [③⑩] soon 比如 快要 done 什么样 maybe which 欤 最近 当前
结果: