2018 年 10月 15 日随笔档案 - 左手中倒影

MapReduce实现与自定义词典文件基于hanLP的中文分词详解

摘要：文本分类任务的第1步，就是对语料进行分词。在单机模式下，可以选择python jieba分词，使用起来较方便。但是如果希望在Hadoop集群上通过mapreduce程序来进行分词，则hanLP更加胜任。阅读全文

posted @ 2018-10-15 10:20 左手中倒影阅读(400) 评论(0) 推荐(0) 编辑