04 2019 档案

BERT和ULMFIT embedding比较文本分类结果
摘要：Instructions [THIS REPOSITORY IS UNDER DEVELOPMENT AND MOER DATASETS AND MODELS WILL BE ADDED] [FEEL FREE TO MAKE PULL REQUEST FOR A NEW DATASET OR NE 阅读全文
posted @ 2019-04-30 17:43 今夜无风 阅读(537) 评论(0) 推荐(0) 编辑
Ubuntu16.04更新python3.5到python3.7
摘要：下载wget https://www.python.org/ftp/python/3.7.1/Python-3.7.1rc2.tgz 解压tar zxvf Python-3.7.1rc2.tgzcd Python-3.7.1rc2 编译./configuremakemake install 先找的p 阅读全文
posted @ 2019-04-26 16:23 今夜无风 阅读(2541) 评论(0) 推荐(0) 编辑
python2和python3共存时，设置默认python为python3
摘要：sudo update-alternatives --install /usr/bin/python python /usr/bin/python2 100 sudo update-alternatives --install /usr/bin/python python /usr/bin/pyth 阅读全文
posted @ 2019-04-26 15:14 今夜无风 阅读(1594) 评论(0) 推荐(0) 编辑
ubuntu16.04升级Python3.5到Python3.7
摘要：因为python3.5和python3.6之后的版本差异很大，所有需要改变python的版本 简易安装python后得到的3版本的版本号是python3.5。 可以使用下面的命令查看py版本： python3 --version 因为版本内容/接口等的不同，需要将其升级到更高的版本操作如下： 1、安 阅读全文
posted @ 2019-04-25 21:49 今夜无风 阅读(5479) 评论(0) 推荐(0) 编辑
Ubuntu16.04 创建和使用虚拟环境
摘要：1. 虚拟环境 虚拟环境（virtual environment），顾名思义是虚拟出来的环境，通俗来讲，可以借助虚拟机，docker来理解虚拟环境，就是把一部分内容独立出来，我们把这部分独立出来的东西称作“容器”。在这个容器中，我们可以只安装自己所需的依赖包，而各个容器之间相互隔离，互不影响。 比如 阅读全文
posted @ 2019-04-25 21:37 今夜无风 阅读(575) 评论(0) 推荐(0) 编辑
Linux下面使用命令如何运行.sh文件的两种解决办法
摘要：Linux下面用命令如何运行.sh文件的方法，有两种方法： 一、直接./加上文件名.sh，如运行hello.sh为./hello.sh【hello.sh必须有x权限】 二、直接sh 加上文件名.sh，如运行hello.sh为sh hello.sh【hello.sh可以没有x权限】 阅读全文
posted @ 2019-04-25 10:53 今夜无风 阅读(7433) 评论(0) 推荐(0) 编辑
Ubuntu-1604-LTS在虚拟机设置分辨率
摘要：在虚拟机中安装ubuntu系统时，有时系统的界面并不同虚拟机展示的匹配，需要我们进行调整。不用那么多废话，直接看图： 阅读全文
posted @ 2019-04-25 10:42 今夜无风 阅读(390) 评论(0) 推荐(0) 编辑
Linux下查找某一文件常用的方式
摘要：当我们需要在ubuntu中找到之前的某一个文件，该用什么方式呢？用以下命令你就可以快速定位： 用find查找这个命令，确定查找范围，在根目录下查找，-name，要查找的文件名称，我要找的是“pycharm.sh” 阅读全文
posted @ 2019-04-25 09:09 今夜无风 阅读(618) 评论(0) 推荐(0) 编辑
Facebook AI的工业级NLP开源框架—— Pytext
摘要：PyText是基于NLP深度学习技术、通过Pytorch构建的建模框架。PyText解决了既要实现快速实验又要部署大规模服务模型的经常相互冲突。并且，Facebook已经采用了使用PyText快速迭代新的建模思路，然后大规模无缝衔接地发布它们。 相关资料 主页: https://facebook.a 阅读全文
posted @ 2019-04-24 16:32 今夜无风 阅读(484) 评论(0) 推荐(0) 编辑
AAAI2018中的自注意力机制(Self-attention Mechanism)
摘要：近年来，注意力（Attention）机制被广泛应用到基于深度学习的自然语言处理(NLP)各个任务中。随着注意力机制的深入研究，各式各样的attention被研究者们提出，如单个、多个、交互式等等。去年6月，google机器翻译团队在arXiv上的《Attention is all you need》 阅读全文
posted @ 2019-04-16 11:43 今夜无风 阅读(11403) 评论(0) 推荐(0) 编辑
预训练模型迁移学习
摘要：如何快速简便地解决图像分类问题呢？本文通过使用Keras及一个预训练模型的实例，教你如何通过迁移学习来解决这个问题。 深度学习正在迅速成为人工智能应用开发的主要工具。在计算机视觉、自然语言处理和语音识别等领域都已有成功的案例。 深度学习擅长解决的一个问题是图像分类。图像分类的目标是根据一组合理的类别 阅读全文
posted @ 2019-04-16 09:19 今夜无风 阅读(2264) 评论(0) 推荐(0) 编辑
迁移学习在自然语言处理中的应用
摘要：迁移学习近年来在图形领域中得到了快速的发展，主要在于某些特定的领域不具备足够的数据，不能让深度模型学习的很好，需要从其它领域训练好的模型迁移过来，再使用该模型进行微调，使得该模型能很好地拟合少量数据的同时又具备较好的泛化能力（不过拟合）。 在迁移学习任务中，需要事先定义一组源数据集合，使用该集合训练 阅读全文
posted @ 2019-04-15 18:46 今夜无风 阅读(849) 评论(0) 推荐(0) 编辑
pytorch实现AlexNet网络
摘要：直接上图吧 写网络就像搭积木 阅读全文
posted @ 2019-04-10 19:53 今夜无风 阅读(1869) 评论(0) 推荐(0) 编辑
pytorch-MNIST数据模型测试
摘要：用pytorch搭建一个DNN网络，主要目的是熟悉pytorch的使用 阅读全文
posted @ 2019-04-09 18:10 今夜无风 阅读(749) 评论(0) 推荐(0) 编辑
pytorch--nn.Sequential学习
摘要：nn.SequentialA sequential container. Modules will be added to it in the order they are passed in the constructor. Alternatively, an ordered dict of mo 阅读全文
posted @ 2019-04-09 11:30 今夜无风 阅读(2812) 评论(0) 推荐(0) 编辑
word2vec生成词向量和字向量
摘要：生成字符向量的过程中需要注意： 1）在收集数据生成corpus时候，通过Word2Vec生成字向量的时候，产生了“ ”空格字符向量，但是加载模型是不会成功的。那么你不是生成的binary文件，就可以修改此文件，更改或删除。 示例参考代码如下： 阅读全文
posted @ 2019-04-09 10:15 今夜无风 阅读(6650) 评论(7) 推荐(1) 编辑
Tensorflow 的saved_model模块学习
摘要：saved_model模块主要用于TensorFlow Serving。TF Serving是一个将训练好的模型部署至生产环境的系统，主要的优点在于可以保持Server端与API不变的情况下，部署新的算法或进行试验，同时还有很高的性能。 在模型的训练阶段，同时要保存tfs需要的saved_model 阅读全文
posted @ 2019-04-03 09:12 今夜无风 阅读(1928) 评论(0) 推荐(0) 编辑
torch.nn.Embedding
摘要：自然语言中的常用的构建词向量方法，将id化后的语料库，映射到低维稠密的向量空间中，pytorch 中的使用如下： 输出： 需要注意的几点： 1）id化后的数据需要查表构建词向量时，idx必须是Long型的tensor 2）查表操作embeds即可得出嵌入向量 阅读全文
posted @ 2019-04-01 09:22 今夜无风 阅读(6018) 评论(0) 推荐(0) 编辑