boost-tokenizer分词库学习
摘要:
boost-tokenizer学习 tokenizer库是一个专门用于分词(token)的字符串处理库;可以使用简单易用的方法把一个字符串分解成若干个单词;tokenizerl类是该库的核心,它以容器的外观提供分词序列;TokenizerFunc:专门的分词函数对象,默认使用空格和标点分词 char 阅读全文
posted @ 2017-06-29 16:56 我来乔23 阅读(331) 评论(0) 推荐(0) 编辑