第四章谈谈中文分词
摘要:
1.中文分词的演变由于中文等语言,字与字之间是没有空格隔开的,所以需要分词。最简单的分词就是查字典。就是从左到右或者从右到左扫描一句话,然后找到最长的匹配。这种方法可以解决七八成的分词问题。但是毕竟太简单了一点。后来哈工大王晓龙博士把查字典方法理论化,发展成最少词数的分词理论,即一句话应该分成数量最... 阅读全文
posted @ 2014-06-26 21:08 King_K 阅读(256) 评论(0) 推荐(0) 编辑