2019年12月16日
nlp数据清洗(包括有英文和中文)
摘要： 一、英文数据清洗 英文数据清洗是去除缩写、非字母符号、专有名词的缩写、提取词干、提取词根。 1.常规的清洗方式 去除非字母符号和常用缩写 #coding=utf-8 import jieba import unicodedata import sys,re,collections,nltk from 阅读全文
posted @ 2019-12-16 16:42 suwenyuan 阅读(3053) 评论(0) 推荐(0) 编辑