2020年7月28日
NLP学习笔记：搭建一个分词工具（枚举算法和维特比算法）
摘要： 1.使用枚举算法实现分词 根据已有的词典进行分词，将所有分词的可能性列举出来，并且根据各个词出现概率进行path求和，得到的最大或者-log的最小，即为最好的分词结果。并将结果返回 算法实现如下： # TODO: 第一步 import xlrd import numpy as np # ： 从dic 阅读全文
posted @ 2020-07-28 20:08 星际毁灭 阅读(399) 评论(0) 推荐(0) 编辑