2014年7月3日
Lucene源码解析--Analyzer之Tokenizer
摘要： Analyzer包含两个核心组件，Tokenizer以及TokenFilter。两者的区别在于，前者在字符级别处理流，而后者则在词语级别处理流。Tokenizer是Analyzer的第一步，其构造函数接收一个Reader作为参数，而TokenFilter则是一个类似的拦截器，其参数可以是TokenS... 阅读全文
posted @ 2014-07-03 11:55 飞扬的薰衣草 阅读(189) 评论(0) 推荐(0) 编辑