摘要:
NLP(十二)依存句法分析的可视化及图分析 转自:jclian91 依存句法分析的效果虽然没有像分词、NER的效果来的好,但也有其使用价值,在日常的工作中,我们免不了要和其打交道。笔者这几天一直在想如何分析依存句法分析的结果,一个重要的方面便是其可视化和它的图分析。 我们使用的NLP工具为jieba 阅读全文
摘要:
NLP入门(十一)从文本中提取时间 转自:jclian91 在我们的日常生活和工作中,从文本中提取时间是一项非常基础却重要的工作,因此,本文将介绍如何从文本中有效地提取时间。 举个简单的例子,我们需要从下面的文本中提取时间: 6月28日,杭州市统计局权威公布《2019年5月月报》,杭州市医保参保人数 阅读全文
摘要:
NLP入门(十)使用LSTM进行文本情感分析 转自:jclian91 情感分析简介 文本情感分析(Sentiment Analysis)是自然语言处理(NLP)方法中常见的应用,也是一个有趣的基本任务,尤其是以提炼文本情绪内容为目的的分类。它是对带有情感色彩的主观性文本进行分析、处理、归纳和推理的过 阅读全文
摘要:
NLP入门(九)词义消岐(WSD)的简介与实现 转自:jclian91](https://segmentfault.com/u/jclian91) 词义消岐简介 词义消岐,英文名称为Word Sense Disambiguation,英语缩写为WSD,是自然语言处理(NLP)中一个非常有趣的基本任务 阅读全文
摘要:
NLP入门(八)使用CRF++实现命名实体识别(NER) 转自:jclian91 CRF与NER简介 CRF,英文全称为conditional random field, 中文名为条件随机场,是给定一组输入随机变量条件下另一组输出随机变量的条件概率分布模型,其特点是假设输出随机变量构成马尔可夫(Ma 阅读全文
摘要:
NLP入门(七)中文预处理之繁简体转换及获取拼音](https://segmentfault.com/a/1190000018086549) 转自:[jclian91 在日常的中文NLP中,经常会涉及到中文的繁简体转换以及拼音的标注等问题,本文将介绍这两个方面的实现。 首先是中文的繁简体转换,不需要 阅读全文
摘要:
NLP入门(六) pyltp的介绍与使用 转自:jclian91 原文链接:https://segmentfault.com/a/1190000018081013 pyltp的简介 语言技术平台(LTP)经过哈工大社会计算与信息检索研究中心 11 年的持续研发和推广, 是国内外最具影响力的中文处理基 阅读全文
摘要:
NLP入门(五)用深度学习实现命名实体识别(NER) 转自:jclian91 原文链接:https://segmentfault.com/a/1190000017040739 前言 在文章:NLP入门(四)命名实体识别(NER)中,笔者介绍了两个实现命名实体识别的工具——NLTK和Stanford 阅读全文
摘要:
NLP入门(四)命名实体识别(NER)转自:jclian91 原文链接:https://segmentfault.com/a/1190000017015436 本文将会简单介绍自然语言处理(NLP)中的命名实体识别(NER)。 命名实体识别(Named Entity Recognition,简称NE 阅读全文
摘要:
NLP(三)词形还原(Lemmatization) 原文l链接:https://segmentfault.com/a/1190000016891462 词形还原(Lemmatization)是文本预处理中的重要部分,与词干提取(stemming)很相似。 简单说来,词形还原就是去掉单词的词缀,提取单 阅读全文