摘要: 因为公司搜索要求 故在网站上 查找了一些中文分词系统。 看来看去都不是特别满意,后来看到了一款:SCWS 是 Simple Chinese Words Segmentation 的缩写,即简易中文分词系统。这款中文分词使用起来比较方便的。scws中文分词说明这是一套基于词频词典的机械中文分词引擎,它能将一整段的汉字基本正确的切分成词。词是汉语的基本语素单位,而书写的时候不像英语会在词之间用空格分开,所以如何准确而又快速的分词一直是中文分词的攻关难点。SCWS 在概念上并无创新成分,采用的是自行采集的词频词典,并辅以一定程度上的专有名称、人名、地名、数字年代等规则集,经小范围测试大概准确率在 9 阅读全文
posted @ 2011-08-05 09:56 anti liu 阅读(410) 评论(0) 推荐(1) 编辑