tensorflow 笔记 15：如何使用 Supervisor
摘要：如何使用Supervisor在不使用Supervisor的时候，我们的代码经常是这么组织的 下面介绍如何用Supervisor来改写上面程序 总结从上面代码可以看出，Supervisor帮助我们处理一些事情 （1）自动去checkpoint加载数据或初始化数据 （2）自身有一个Saver，可以用来保
阅读全文
posted @
2019-05-23 17:49
细雨微光
阅读(658)
推荐(0) 编辑
tensorflow 笔记14：tf.expand_dims和tf.squeeze函数
摘要：tf.expand_dims和tf.squeeze函数 tf.expand_dims和tf.squeeze函数 tf.expand_dims和tf.squeeze函数 tf.expand_dims和tf.squeeze函数 一、tf.expand_dims() Function tf.expand_
阅读全文
posted @
2019-03-12 21:18
细雨微光
阅读(1511)
推荐(0) 编辑
tensorflow 笔记13：了解机器翻译，google NMT，Attention
摘要：一、关于Attention，关于NMT 未完待续、、、 以google 的 nmt 代码引入 探讨下端到端： 项目地址：https://github.com/tensorflow/nmt 机器翻译算是深度学习在垂直领域应用最成功的之一了，深度学习在垂直领域的应用的确能解决很多之前繁琐的问题，但是缺乏
阅读全文
posted @
2019-03-12 21:11
细雨微光
阅读(1887)
推荐(0) 编辑
更新显卡驱动
摘要：目的： 在Ubuntu 16.04上安装最新显卡驱动 主要步骤： http://www.nvidia.com/Download/index.aspx?lang=en-us 1080TI当前的最新驱动版本为390.48 4.查找并安装最新驱动 返回如下结果： ，最新版本396已加载。采用apt-get
阅读全文
posted @
2018-10-09 15:39
细雨微光
阅读(2256)
推荐(0) 编辑
训练的时候 nvidia：自动刷新
摘要：间隔一秒自动刷新： watch -n 1 -d nvidia-smi
阅读全文
posted @
2018-09-26 21:37
细雨微光
阅读(291)
推荐(0) 编辑
tensorflow 笔记12：函数区别：placeholder，variable，get_variable，参数共享
摘要：一、函数意义： 1、tf.Variable() 变量 用于生成一个初始值为initial-value的变量。必须指定初始化值 2、tf.get_variable() 共享变量 原函数： 获取已存在的变量（要求不仅名字，而且初始化方法等各个参数都一样），如果不存在，就新建一个。 可以用各种初始化方法，
阅读全文
posted @
2018-09-05 20:37
细雨微光
阅读(3228)
推荐(0) 编辑
tensorflow 笔记10：tf.nn.sparse_softmax_cross_entropy_with_logits 函数
摘要：函数：tf.nn.sparse_softmax_cross_entropy_with_logits(_sentinel=None,labels=None,logits=None,name=None) #如果遇到这个问题：Rank mismatch: Rank of labels (received
阅读全文
posted @
2018-08-07 20:18
细雨微光
阅读(11312)
推荐(1) 编辑
RNN，LSTM，GRU简单图解：
摘要：一篇经典的讲解RNN的，大部分网络图都来源于此：http://colah.github.io/posts/2015-08-Understanding-LSTMs/ 每一层每一时刻的输入输出：https://www.cnblogs.com/lovychen/p/9368390.html 带有权重标识的
阅读全文
posted @
2018-08-07 17:45
细雨微光
阅读(4946)
推荐(0) 编辑
batch，iteration，epoch 什么意思
摘要：深度学习中经常看到epoch、 iteration和batchsize，下面按自己的理解说说这三个的区别： （1）batchsize：批大小。在深度学习中，一般采用SGD训练，即每次训练在训练集中取batchsize个样本训练； （2）iteration：1个iteration等于使用batchsi
阅读全文
posted @
2018-07-20 20:54
细雨微光
阅读(1019)
推荐(0) 编辑
关键词抽取：pagerank，textrank
摘要：摘抄自微信公众号：AI学习与实践 TextRank，它利用图模型来提取文章中的关键词。由 Google 著名的网页排序算法 PageRank 改编而来的算法。 PageRank PageRank PageRank 是一种通过网页之间的超链接来计算网页重要性的技术，以 Google 创办人 Larry
阅读全文
posted @
2018-06-29 11:37
细雨微光
阅读(2169)
推荐(0) 编辑
tensorflow2：tf.app.run()
摘要：在很多TensorFlow公布的Demo中，都有这样的代码存在，如下，这是干什么的呢？ if __name__ == "__main__": tf.app.run() if __name__ == "__main__": tf.app.run() if __name__ == "__main__":
阅读全文
posted @
2018-06-14 15:51
细雨微光
阅读(4177)
推荐(0) 编辑
Anaconda的使用和包的更新；conda 创建虚拟环境
摘要：moniconda 安装： 官网各版本路径如下：https://repo.anaconda.com/miniconda/ conda安装： 官网各版本路径如下：https://repo.anaconda.com/archive/ 两种安装方式一样： 如下 官网下好后，直接 sh * 会提示安装路径，
阅读全文
posted @
2018-03-23 19:46
细雨微光
阅读(24394)
推荐(1) 编辑
准确率(Accuracy), 精确率(Precision), 召回率(Recall)和F1-Measure
摘要：转载地址：https://blog.argcv.com/articles/1036.c 准确率(Accuracy), 精确率(Precision), 召回率(Recall)和F1-Measure 机器学习(ML),自然语言处理(NLP),信息检索(IR)等领域,评估(Evaluation)是一个必要
阅读全文
posted @
2018-03-01 20:32
细雨微光
阅读(699)
推荐(0) 编辑
tensorflow笔记1：基础函数、embedding_lookup
摘要：函数一：tf.nn.embedding_lookup（） ERROR： 解决办法：https://stackoverflow.com/questions/43452873/bidirectional-dynamic-rnn-function-in-tensorflow-1-0 #之前的： tf.nn
阅读全文
posted @
2018-01-30 15:59
细雨微光
阅读(8356)
推荐(0) 编辑
深度学习激活函数比较
摘要：1、什么是激活函数 2、为什么要用 3、都有什么激活函数 4、sigmoid，Relu，softmax 1. 什么是激活函数 如下图，在神经元中，输入的 inputs 通过加权，求和后，还被作用了一个函数，这个函数就是激活函数 Activation Function。 2. 为什么要用 如果不用激励
阅读全文
posted @
2017-09-20 15:41
细雨微光
阅读(7501)
推荐(0) 编辑
利用余弦定理计算文本的相似度
摘要：#!/usr/bin/env python # -*- coding: utf-8 -*- from __future__ import division import jieba.analyse from math import sqrt class Similarity(): def __init__(self, target1, target2, topK=10): ...
阅读全文
posted @
2017-01-25 16:23
细雨微光
阅读(2032)
推荐(0) 编辑
什么是词干化处理
摘要：词干化处理： 在NLP中，我们对一句话或一个文档分词之后，一般要进行词干化处理。词干化处理就是把一些名词的复数去掉，动词的不同时态去掉等等类似的处理。 对于切词得到的英文单词要进行词干化处理，主要包括将名词的复数变为单数和将动词的其他形态变为基本形态。对动词的词干化可以使用 Porter 算法[5]
阅读全文
posted @
2016-08-11 14:55
细雨微光
阅读(2463)
推荐(0) 编辑
Python 结巴分词（2）关键字提取
摘要：提取关键字的文章是，小说完美世界的前十章； 我事先把前十章合并到了一个文件中； 然后直接调用关键字函数； 关键字结果：
阅读全文
posted @
2016-07-18 20:37
细雨微光
阅读(8984)
推荐(1) 编辑
Python 结巴分词（1）分词
摘要：利用结巴分词来进行词频的统计，并输出到文件中。 结巴分词github地址：结巴分词 结巴分词的特点： 支持三种分词模式： 精确模式，试图将句子最精确地切开，适合文本分析； 全模式，把句子中所有的可以成词的词语都扫描出来, 速度非常快，但是不能解决歧义； 搜索引擎模式，在精确模式的基础上，对长词再次切
阅读全文
posted @
2016-07-18 13:47
细雨微光
阅读(12491)
推荐(0) 编辑
