MrDoghead

2020年6月19日

摘要：什么是文本分类文本分类任务是NLP十分常见的任务大类，他的输入一般是文本信息，输出则是预测得到的分类标签。主要的文本分类任务有主题分类、情感分析、作品归属、真伪检测等，很多问题其实通过转化后也能用分类的方法去做。常规步骤选择一个感兴趣的任务收集合适的数据集做好标注特征选择选择一个机器阅读全文

posted @ 2020-06-19 19:58 MrDoghead 阅读(1869) 评论(0) 推荐(0) 编辑

N-gram语言模型

摘要：语言模型 NLP是用来理解和解释语言的，语言模型可以帮助我们解决一些类型的问题，例如检查拼写、生成对话、内容识别、机器翻译等等，N-gram就是一种非常经典的语言模型。 Markov Assumption 一个简单假设：\(P(w_i|w_1...w_{i-1}) \approx P(w_i|w_{ 阅读全文

posted @ 2020-06-19 01:53 MrDoghead 阅读(261) 评论(0) 推荐(0) 编辑

2020年6月18日

文本预处理 Text Preprocessing

摘要：为什么要预处理？我们知道，大部分NLP任务都是以文本形式输入的，然鹅language is compositional！我们理解文本通常能够把文本拆分成多个构成的部分去理解，那么机器也可以这么做，而预处理就是第一步操作！常规步骤 1. 去除不需要的格式信息如HTML 2. 把文本拆分成句子可阅读全文

posted @ 2020-06-18 23:15 MrDoghead 阅读(704) 评论(0) 推荐(0) 编辑

2020年4月15日

NLTK文本分类入门——判别谣言

摘要：前言今天分享一个nlp任务的实例：给定一句话，要求判别是否为谣言。这里只使用NLTK等工具（简单实用），不涉及deep learning的相关内容，所以是初学者友好型实例。本文包括了数据预处理、模型搭建以及预测评估三个方面，使用的算法主要为Naive Bayes和Logistic Regressi 阅读全文

posted @ 2020-04-15 21:01 MrDoghead 阅读(443) 评论(0) 推荐(0) 编辑

如何使用Sublime Text查看Json文件

摘要：步骤 1. 打开sublime text 2. 按 command + shift + p 3. 输入 Install package 4. 搜索 Pretty JSON，安装 5. 打开json文件 6. 按 command + ctrl + j 格式化，完成阅读全文

posted @ 2020-04-15 15:55 MrDoghead 阅读(7727) 评论(0) 推荐(0) 编辑

2020年4月10日

使用ipython notebook查看编辑.ipynb文件

摘要： .ipynb文件平时我们可能会遇到.ipynb文件，如何查看并编辑它呢？方法有很多，比如使用Jupiter notebook，google drive，ipython等等，今天介绍的是使用ipython notebook的方法来操作。安装ipython notebook 打开 .ipynb文件阅读全文

posted @ 2020-04-10 18:15 MrDoghead 阅读(1020) 评论(0) 推荐(0) 编辑

Git入门（三）

摘要： Github 我copy一下维基的介绍，“GitHub是通过Git进行版本控制的软件源代码托管服务平台，由GitHub公司（曾称Logical Awesome）的开发者Chris Wanstrath、PJ Hyett和Tom Preston-Werner使用Ruby on Rails编写而成。Git 阅读全文

posted @ 2020-04-10 17:59 MrDoghead 阅读(142) 评论(0) 推荐(0) 编辑

Git入门（二）

摘要：版本穿梭这个就是版本管理工具的强大之处了，下面列举了一些在各个版本之间穿梭的方法这里我还是要放出那张图，出图！分支下面也是跟着一些常用命令来了解一下重新定向谨慎使用rebase，会丢失分支历史信息（master的id也会变），用于把master重新定向到指定的分支后面，语法：暂存代码阅读全文

posted @ 2020-04-10 17:02 MrDoghead 阅读(117) 评论(0) 推荐(0) 编辑

Git入门（一）

摘要：什么是git Git 是一个开源的分布式版本控制系统,用于敏捷高效地处理任何或小或大的项目。注意，git和github是区别的，后面会讲到。安装git 下载git工具：https://sourceforge.net/projects/git osx installer/ 也可以从这里选择多版本：h 阅读全文

posted @ 2020-04-10 16:39 MrDoghead 阅读(171) 评论(0) 推荐(0) 编辑

2020年4月8日

macOS如何安装mpi4py

摘要：前言这次第一次我遇到的macOS安装python模块比win下安装要麻烦的！网上找了很多方案，也都尝试了，要么失败要么过于繁琐（=失败），最后终于找到一个方法，无痛解决安装问题！安装方法使用open mpi携带安装： 1. 打开mac的terminal终端：Press Command+Spac 阅读全文

posted @ 2020-04-08 21:06 MrDoghead 阅读(1689) 评论(0) 推荐(0) 编辑

一只小白的自我修炼

公告