python分词技术——jieba安装使用

jieba安装:

 下载安装包,官网地址:https://pypi.org/project/jieba//

本人网盘链接:https://pan.baidu.com/s/1ufgUyYPaBv2NTUvwybH1Ew
提取码:nxed

解压安装:

  首先压到任意目录

  打开cmd命令行窗口并切换到jieba目录下

 

  运行python setup.py install完成安装

用法:

import jieba.analyse

path = 'D:/1.txt'
fp = open(path,'r',encoding='UTF-8')
content = fp.read()
try:
    jieba.analyse.set_stop_words('D:\Program Files (x86)\Python\ku\中文停用词表.txt')#选择停用词表
    tags = jieba.analyse.extract_tags(content,topK=100,withWeight=True)#content为文本信息,topK参数为提取关键词的个数
    for item in tags:
        print(item[0]+'\t'+str(int(item[1]*1000)))#权重为小数,乘1000变为整数
finally:
    fp.close()

停用词表:

 
为止
纵然
all
例如
[④e]
when
亦
来讲
谁料
届时
或多或少
不外
即使
独自
啐
反倒
=☆
you'll
+ξ
哎呀
yet
从轻
切不可
举行
specified
进而
]
[②g]
hello
嗡
绝
传说
despite
吧哒
临到
川流不息
心里
they're
过去
不迭
坚决
管
亲手
竟而
some
理当
最
断然
好象
此间
不下
serious
their
本地
而已
和
≈
following
不可开交
[②c] 
—
乘隙
咚
however
屡次三番
almost
不时
半
依照
多多少少
--
当头
距
刚巧
喽
上去
假如
后
changes
任
叮咚
独
came
如此等等
切切
也是
对比
)、
注意
⑨
taken
以后
×
能
[③c]
wherever
thence
两者
顺着
gone
宣布
5:0  
伟大
互相
尽管
恰巧
几度
嗬
what
刚才
总结
故此
≈ 
使得
顷刻间
[①⑤]
got
相等
适应
屡
怪不得
不免
也罢
⑩
these
这样
ignored
you're
够瞧的
[③g]
ok
来自
the
存心
fifth
they've
2
略加
立地
我的
of
behind
不胜
many
假若
打
~~~~
白白
specifying
就要
拿
率尔
表示
多么
2
below
weren't
③]
反手
极为
如上
[②⑦]
theirs
一
本
复杂
^
长线
there
凡
毫无保留地
<φ
更进一步
让
分期
*
不可抗拒
尔尔
除此以外
㈧ 
近年来
于
就算
理应
furthermore
不要
因为
doesn't
不若
人人
’
大多数
不单
[②②]
砰
它是
[②⑤]
~+
且不说
前此
=(
}
namely
amongst
矣乎
<λ
今年
anyone
除了
具体地说
尽早
尽量
诸如
containing
今後
旁人
其
do
self
our
依
蛮
鄙人
indicated
[②B] 
whereby
倒不如
以来
次第
达旦
less
是不是
yourselves
shall
应用
A
~
〈
明显
allow
那边
sorry
7
难得
尽心尽力
&
ours
您们
too
强调
一何
齐
from
[⑨]
a]
就是了
规定
也就是说
[⑤e]
my
为了
彻夜
出
来
eg
日臻
不满
如下
仍旧
满足
各个
如若
moreover
主张
mostly
anywhere
为什麽
认为
从未
极
方
地
今后
同时
们
say
上来
决非
通过
hence
一次
其它
::
严重
tried
左右
much
因此
千万
伙同
快
近几年来
如次
不论
`
third
formerly
但
嘻
now
还有
by
绝顶
嘘
[②b]
exp
巴
难道说
其一
here
人
周围
(
始而
in
三
个别
恰恰相反
哪怕
=-
按期
扩大
千万千万
策略地
不对
每年
nothing
’‘ 
起
话说
upon
猛然间
=
别
打开天窗说亮话
instead
边
不已
什么
乘虚
want
|
则
替
局外
knows
抽冷子
的话
立马
若是
表明
认识
多亏
定
[②a]
上
where's
当下
何必
乃至
不止一次
从来
倍感
呜
tends
right
是
当时
非常
哈哈
趁热
人民
没有
切
获得
这些
有力
除却
off
goes
whoever
known
概
may
asking
避免
暗中
[①①]
“
'
everything
+
二话没说
从此以后
莫不
②
哎哟
brief
just
吧
不得
▲
本人
nine
不怎么
何苦
? 
consequently
clearly
th
whereas
一致
否则
尽
这么样
这种
went
一方面
,
able
屡次
我们
日复一日
near
运用
另行
$
较
即刻
regardless
they'd
4
there's
论
今天
useful
[①o]
弗
曾
sometimes
有利
is
又及
这儿
通常
am
成心
--
least
将近
强烈
据实
准备
俺
显然
already
失去
犹且
当地
最後
随着
thru
unlikely
借此
了
何须
吓
不但
随
won't
anyway
currently
藉以
×××
more
乘机
不妨
甚么
倘若
公然
不惟
甚或
你是
有的是
更加
一些
由此
R.L.
大批
-- 
后来
首先
a's
此外
0:2
呸
总之
[②⑧]
.
的
to
might
一直
宁可
thoroughly
不力
上面
范围
当场
et
何尝
八成
per
saying
/
once
-β
呢
之
among
un
从小
忽然
矣哉
everywhere
挨门逐户
权时
indicate
进行
其次
得起
怕
[③d]
唯有
不同
大家
take
seem
她的
appreciate
contains
二话不说
此次
let
反映
如同
/
①
似的
相当
大约
awfully
herself
[②c]
哦
请勿
12%
里面
Δ
ng昉
望
either
背地里
转动
挨次
慢说
0:2 
zt
both
does
→
causes
has
好
hardly
莫如
按照
哗
used
大举
哎
连
更为
whither
looking
与此同时
啪达
必定
一则
啷当
恰如
起先
或是
毫不
换言之
大张旗鼓
以及
从中
某些
={
上下
既是
赶
敢
be
勃然
thank
whether
please
每个
[①c]
从无到有
四
重要
<±
防止
———
之所以
极端
0
将
自后
yourself
怎么
不比
基于
结果
9
当
这般
i'm
凭
连日
[
那么样
简而言之
乃
于是
甭
该
seeming
them
it
成为
从优
何以
不能不
单纯
大多
赖以
逐渐
here's
一片
碰巧
汝
ex
加上
诸
隔日
placed
穷年累月
$
had
下面
之一
加强
换句话说
直到
我是
hither
through
召开
竟然
嗳
若果 
反之则
绝对
一旦
!
#
方面
而况
其余
大不了
haven't
广大
比起
若
从不
何妨
诚如
后面
矣
难道
~
充其极
古来
nearly
不可
wasn't
间或
个
却
以为
单
consider
坚持
see
别处
downwards
become
[①A]
啊
反而
那么些
we've
乌乎
先不先
——
greetings
every
!
迫于
,也
last
允许
率然
would
特点
』
下列
尽快
之后
several
甚而
”
|
*
即将
哪
hadn't
非独
人家
毕竟
相对而言
截至
咋
zero
wouldn't
很少
necessary
corresponding
particular
next
限制
全力
当庭
而且
咦
specify
whom
somewhere
看来
有著
历
her
敢于
ZT
哗啦
从
多次
无
末##末
非但
些
」
不少
unfortunately
设或
不料
按
出于
out
这一来
应当
密切
appropriate
unless
行动
…………………………………………………③
仅
只消
why
何处
却不
不变
]∧′=[
hereupon
保管
常常
[①③]
〕〔
紧接着
someone
最好
先後
可见
except
wherein
also
引起
并
俺们
别管
can
whenever
it'll
另一方面
交口
保持
[②③]
tries
决定
必要
[①⑥]
保险
everybody
going
嘿嘿
反应
nowhere
关于
牢牢
根本
。
为主
不足
深入
看见
路经
whereafter
用来
是的
过来
单单
[②
着
初
皆可
something
you'd
有些
somewhat
较比
[⑩]
В
somehow
谁
针对
要求
its
不敢
indicates
later
together
whereupon
莫若
其他
某个
尽如人意
contain
连日来
仍然
不巧
merely
正在
从早到晚
且说
巨大
假使
,也 
别人
somebody
怎
[③①]
严格
 
果真
由于
纵令
据我所知
于是乎
社会主义
切莫
如果
何
这麽
cant
相应
与其说
串行
#
安全
便
这会儿
who
who's
不怕
极了
附近
反过来
争取
with
到头
遵照
++
不够
莫非
除开
不亦乐乎
即便
倘
being
[②j]
自
[⑤]]
被
多多益善
come
好的
转变
certain
non
近来
不成
几
或许
whatever
哉
零
nevertheless
//
particularly
常言说得好
⑧
均
类如
岂但
along
是否
并没
而
cannot
.
as
比
2.3%
看上去
五
它
接著
不外乎
并无
离
个人
对方
除外
another
[②①]
[④a]
缕缕
selves
=[
凑巧
再者说
novel
怎么办
哇
哼
真正
莫不然
_
有的
您
obviously
如此
略
respectively
并没有
宁
挨家挨户
不大
拦腰
就
岂止
当中
us
1. 
;
不得已
分头
默然
故
concerning
不择手段
不知不觉
一定
倘或
贼死
她
and
而外
reasonably
彼时
re
遇到
normally
look
尽然
焉
[⑦]
can't
?
⑤
要不是
练习
数/
奋勇
becoming
非徒
就是说
以免
few
各地
× 
一一
believe
明确
一天
以致
多数
普遍
因了
另悉
嗯
而又
尚且
虽说
既
加入
well
顿时
[⑤f]
sup
[⑤]
certainly
巴巴
行为
来得及
yours
indeed
nor
乃至于
则甚
三番五次
不特
只是
临
neither
并肩
哩
could
多年前
前后
当真
呗
具体
较为
各自
then
陡然
以
tell
成年
已矣
不
trying
…
相同
不但...而且
云云
积极
全都
後面
瑟瑟
那样
各级
ought
必须
viz
只怕
正巧
起头
toward
+
倘然
如期
so
千
方能
如常
随著
怪
〕
no
:
不独
惯常
日见
happens
几经
对应
少数
let's
me
because
敞开儿
只
having
第二
诚然
beside
get
先后
简直
[①]
mainly
当着
一下
特殊
甫
有关
down
<<
i'd
立时
不拘
然而
[④c]
其二
3
因而
每每
[④b]
via
如何
目前
便于
曾经
Ψ
此处
9
各式
作为
hers
再次
从此
得到
[*]
we're
1.
.日
这里
高低
mean
比照
他们
故意
开始
μ
啥
φ
趁
会
而后
继而
存在
理该
outside
所有
沿着
联袂
猛然
并不
没奈何
an
朝着
而言
him
逢
0
亲身
lest
former
℃ 
>>
合理
γ
论说
专门
[②⑩]
[③b]
上升
得出
如前所述
那般
腾
自各儿
不起
马上
一边
当口儿
意思
似乎
就是
相对
随后
不止
don't
only
provides
别说
这点
使
高兴
由是
什麽
同一
此时
以下
...................
较之
要不然
′|
前面
及
归根结底
叫做
很多
您是
扑通
叫
前进
不管
每时每刻
appear
whence
大都
everyone
如
一起
但愿
豁然
better
最大
大抵
之前
除
达到
6
总而言之
以外
几番
rather
有及
即令
『
besides
已经
起初
越是
[⑤b]
[⑥]
have
弹指之间
常
uses
presumably
它的
因着
万一
其实
集中
seemed
这时
keeps
代替
5
b]
↑
挨门挨户
要不
但是
之类
以至
简言之
的确
onto
name
[①g]
所以
exp 
allows
each
did
喂
they'll
within
大体
那麽
wish
welcome
下
属于
开展
连同
起首
(
挨着
时候
往往
为此
不久
继之
固
除此
清楚
thanks
.日 
从今以后
这么点儿
必将
according
·
完全
-[*]-
大致
不然的话
eight
归根到底
不问
奈
available
you've
从事
略微
other
此后
lately
others
切勿
分别
多少
one
five
动不动
有时
Ⅲ
plus
怎么样
think
知道
℃
f]
不由得
起来
ZZ
A
][
随时
regarding
乘
同
以期
though
哪年
一来
并排
出去
可
说明
[①⑦]
再
岂
likely
secondly
总的来看
趁着
相似
重大
always
best
[①f]
none
possible
while
臭
非得
极度
5
whole
看出
ones
纯
thanx
已
战斗
./
既...又
beyond
然
beforehand
that's
哼唷
[①d]
看起来
associated
above
Lex
得
given
反之
造成
接连不断
不是
[①h]
还是
中小
最后
在于
看
甚至于
从新
我
略为
虽则
竟
不管怎样
直接
按说
每天
现代
anybody
恰似
常言说
顶多
seeing
otherwise
再有
据称
}>
种
陈年
new
3
绝非
said
)÷(1-
凡是
移动
说说
are
并且
谁人
became
介于
广泛
although
再则
该当
不必
不能
儿
不了
for
it's
saw
平素
尽可能
go
何止
另
described
一切
三番两次
谨
away
容易
取得
he's
ie
③
老
这么
才
second
hereafter
还
《
不仅...而且
归齐
way
得天独厚
总是
轰然
都
她们
岂非
 
took
old
当儿
怎样
活
巩固
-- 
喔唷
甚且
反之亦然
显著
或曰
without
无论
全身心
喏
迄
ask
therefore
across
只要
按时
∈[ 
didn't
除非
产生
毋宁
累年
过
themselves
照
喀
除去
4
ain't
倒不如说
you
far
<Δ
we
有
%
不定
使用
■
长此下去
{-
问题
此
背靠背
thereafter
乘势
else
》),
乎
从重
形成
inward
noone
alone
aside
尔等
}
将要
regards
挨个
遭到
he
那儿
抑或
on
冒
呆呆地
实际
[②h]
全体
进来
sensible
为什么
别的
多多
累次
而论
不会
连连
啊哈
奇
由
见
entirely
吱
comes
又
况且
@
朝
欢迎
gotten
isn't
under
因
省得
okay
急匆匆
followed
howbeit
能否
enough
差不多
丰富
他
确定
顺
;
及其
据说
及至
亲口
即是说
下来
谁知
部分
从古至今
your
每逢
不限
seems
可以
譬如
结合
遵循
比方
精光
during
到
doing
〉
待到
从古到今
anything
至若
难怪
herein
[①⑧]
以至于
它们
赶快
依靠
but
吗
keep
光
连声
要是
needs
据
thereby
归
日渐
起见
>
给
]
孰知
[②G]
大事
use
forth
并不是
多年来
thereupon
⑥
elsewhere
couldn't
呼哧
LI
到目前为止
unto
待
元/吨
纵使
为
[②④
充分
since
且
theres
觉得
只当
[②e]
[⑧]
一般
大量
那些
彼
will
而是
any
over
是以
看到
probably
设使
或则
放量
really
虽
仅仅
himself
实现
itself
彼此
总的来说
正如
自个儿
or
兮
到头来
二来
》
原来
己
不光
各
借
每
那
thorough
至今
ever
促进
白
屡屡
满
赶早不赶晚
倒是
were
开外
迅速
处理
靠
正值
经常
哪些
良好
尔后
=
用
差一点
try
kept
要
ZXFITL
以便
惟其
然后
edu
极其
只有
反倒是
……
做到
wants
sub
进入
多
真是
为着
φ.
饱
que
某某
truly
凭借
并非
three
但凡
呕
固然
especially
各人
虽然
apart
不过
_
殆
嘿
啊哟
叮当
哈
可是
基本上
具体来说
趁机
为何
适当
以故
cause
以後
适用
与
一.
前者
gets
different
凝神
不日
各位
尽心竭力
变成
latter
t's
互
如今
>
倘使
本身
>λ
ourselves
昂然
进步
between
six
接下来
无宁
既然
&
日益
果然
顷
before
sometime
亲眼
own
兼之
任凭
其后
无法
[②d]
哪里
趁势
更
加之
definitely
further
恐怕
such
[②⑥]
方便
一转眼
毫无
不仅
本着
[③e]
ltd
从严
不断
嘎登
一番
.一
不至于
呀
对于
般的
seriously
不一
很
[④d]
【
九
阿
~±
exactly
将才
若夫
we'd
反过来说
老大
最高
呵呵
[①C]
所
④
中间
说来
two
许多
有所
姑且
突出
哪边
哪样
∪φ∈
某
罢了
然後
perhaps
[⑤a]
暗自
等等
不如
=″
匆匆
、
孰料
何乐而不为
c]
{
据此
不得不
four
aren't
meanwhile
仍
<
从而
同样
常言道
内
维持
或者
偏偏
隔夜
重新
immediate
继续
大面儿上
傥然
能够
that
这次
尤其
它们的
自身
共同
任何
first
”,
後来
趁早
quite
第
it'd
liked
考虑
致
正常
against
@
去
敢情
那会儿
等到
自家
进去
this
恍然
举凡
‘
[③]
towards
把
co
二
光是
再说
[①i]
刚好
唉
即或
follows
inasmuch
c's
再其次
Lex 
until
成年累月
’‘
出来
thus
e]
来着
沿
啦
]∧′=[ 
这个
那么
具体说来
得了
了解
好在
经过
沙沙
极大
今
犹自
纵
企图
[①E]
[②B]
,
大概
at
应该
当然
hereby
oh
never
只限
那个
咳
i've
example
actually
[⑨] 
嗡嗡
传闻
对待
向使
跟
overall
不然
默默地
c'mon
his
. 
help
哪儿
除此而外
既往
刚
愤然
[②f]
\
以前
been
com
来说
老老实实
乘胜
about
)
哪个
......
相反
latterly
从宽
呼啦
怎麽
if
取道
冲
most
must
漫说
[①②]
6
过于
至于
忽地
若非
逐步
大力
如是
[
非特
另外
大
看看
...
就地
加以
)
yes
咱们
比及
充其量
after
little
哟
必
主要
顷刻
?
老是
──
此中
一面
另一个
暗地里
连袂
1
嘎
hopefully
风雨无阻
8
"
立即
course
says
[①a]
insofar
之後
尔
在
getting
same
〔
know
偶而
来不及
人们
嘛
seven
looks
从头
他人
这
究竟
若果
决不
:
借以
恰恰
5:0
基本
considering
到处
掌握
如其
像
zz
不仅仅
.数
那时
qv
不经意
动辄
尽管如此
than
1
毫无例外
近
完成
几时
极力
三天两头
经
value
shouldn't
等
etc
怎奈
宁肯
[①D]
任务
<
throughout
where
小
各种
据悉
-
格外
设若
着呢
联系
恰逢
wonder
眨眼
how
://
全年
⑦
共
anyhow
居然
绝不
你
甚至
根据
twice
这边
gives
therein
[]
becomes
其中
才能
呐
大凡
[①⑨]
迟早
inc
[①B]
..
不尽
全然
这就是说
纯粹
粗
nobody
从速
哪天
正是
到底
we'll
very
特别是
看样子
每当
不只
此地
seen
whose
××× 
全部
如上所述
整个
诸位
like
大大
彻底
他是
需要
[③F]
偶尔
一样
替代
around
㈧
愿意
大略
自从
不得了
继后
七
那里
可好
十分
一个
受到
组成
故而
[③h]
[②i]
'
你们
处在
与否
接着
nd
啊呀
亲自
先生
相信
up
上述
一则通过
不曾
除此之外
自打
what's
分期分批
庶几
still
具有
[-
not
她是
afterwards
即若
again
来看
anyways
7
及时
帮助
不再
或
现在
云尔
立刻
sent
何况
余外
[③a]
方才
倍加
年复一年
比如说
另方面
嘎嘎
i'll
还要
鉴于
截然
往
they
带
[①e]
出现
need
呵
8
莫
向着
在下
she
rd
六
using
由此可见
向
照着
全面
various
%
vs
∈[
传
趁便
所谓
accordingly
对
按理
willing
然则
梆
usually
这么些
长话短说
长期以来
咱
即
relatively
没
不仅仅是
所在
窃
′∈
者
一时
even
难说
should
可能
打从
有着
hi
myself
宁愿
突然
[⑤d]
总的说来
often
采取
以上
呜呼
有点
不尽然
处处
[④]
普通
[①④]
后者
颇
thats
认真
譬喻
依据
综上所述
八
那末
inner
立
共总
至
sure
hasn't
-
不常
不消
要么
[②]
into
何时
即如
顷刻之间
再者
别是
恰好
咧
也好
庶乎
those
么
与其
构成
呃
was
双方
下去
当即
自己
乒
也
你的
比较
必然
大体上
几乎
︿
有效
他的
到了儿
②c
就此
所幸
转贴
】
[③⑩]
soon
比如
快要
done
什么样
maybe
which
欤
最近
当前
中文停用词.txt

 结果:

 

posted @ 2020-03-02 22:52  田智凯  阅读(2483)  评论(0编辑  收藏  举报