nevergiveupzeng

导航

2015年8月16日 #

Lucene的中文分词器IKAnalyzer

摘要: 分词器对英文的支持是非常好的。 一般分词经过的流程: 1)切分关键词 2)去除停用词 3)把英文单词转为小写 但是老外写的分词器对中文分词一般都是单字分词,分词的效果不好。 国人林良益写的IK Analyzer应该是最好的Lucene中文分词器之一,而且随着Lucene的版本更新而不断更... 阅读全文

posted @ 2015-08-16 10:20 nevergiveupzeng 阅读(433) 评论(0) 推荐(0) 编辑