上一页 1 ··· 5 6 7 8 9 10 11 12 下一页

2016年8月15日

Theano入门神经网络(四)

摘要: 这一部分主要介绍用Theano 实现softmax函数。 在多分类任务中经常用到softmax函数,首先上几个投影片解释一下 假设目标输出是y_hat ,激活函数后的Relu y 一个是1.2 一个是2 ,到底哪一个更好一点 是1.2与1 更加接近?还是2 意味这更大的概率呢? 基于这个原因,我们提 阅读全文

posted @ 2016-08-15 15:36 mitutao 阅读(601) 评论(0) 推荐(0) 编辑

Theano入门神经网络(三)

摘要: 附录一个:Keras学习随笔 http://blog.csdn.net/niuwei22007/article/details/49045909 参考 《Python Machine Learning》这本书的第13章 Theano是Bengio大神课题组弄得。 一、Theano初步 Theano编 阅读全文

posted @ 2016-08-15 14:30 mitutao 阅读(1818) 评论(0) 推荐(0) 编辑

2016年8月14日

Theano入门神经网络(二) 实现一个XOR门

摘要: 与非门的图片如下 示意图 详细解释: 1 定义变量的代码,包括了输入、权值、输出等。其中激活函数采用的是sigmod函数 2 定义目标输出和损失函数计算方式,我们采用的平方损失 另外也可以采用交叉熵损失函数 3 误差反向传播求导,直接调用theano函数求解,方便快捷 4 权值更新 5 开始训练 6 阅读全文

posted @ 2016-08-14 15:50 mitutao 阅读(1815) 评论(0) 推荐(0) 编辑

Theano入门神经网络(一)

摘要: Theano是一个Python库,专门用于定义、优化、求值数学表达式,效率高,适用于多维数组。特别适合做机器学习。一般来说,使用时需要安装python和numpy. 首先回顾一下机器学习的东西,定义一个模型(函数)f(x;w) x为输入,w为模型参数,然后定义一个损失函数c(f),通过数据驱动在一堆 阅读全文

posted @ 2016-08-14 13:11 mitutao 阅读(14366) 评论(0) 推荐(1) 编辑

2016年8月13日

win7+theano with GPU enabled

摘要: 要做卷积神经网络的一些东西,所以要装theano,网上很多Theano安装教程版本较老,而各安装包更新很快,参考价值有限。走了很多弯路才装好,把这个过程记录下来,希望对大家有帮助~ ~ 我的配置:win7,32位(64和32位安装步骤没差,下安装包版本有差而已),vs2012 首先推荐一篇英文安装指 阅读全文

posted @ 2016-08-13 22:02 mitutao 阅读(646) 评论(0) 推荐(0) 编辑

2016年8月11日

过拟合与正则化的数学推导

摘要: 首先,我们看一下什么是过拟合,下面这张图右边,很明显,两类数据的分类率很高,采用了非常复杂的模型,讲两组数据分割开了。但是 我们仔细观察一下,那些混入蓝色区域的红色点,难道不是噪声引起了吗?因此要解决过拟合的问题,我们要讨论如何减少,混入测试数据集中的噪声。 我们以神经网络为例: 对于测试数据来说, 阅读全文

posted @ 2016-08-11 17:28 mitutao 阅读(1121) 评论(0) 推荐(0) 编辑

为什么是梯度下降?SGD

摘要: 在机器学习算法中,为了优化损失函数loss function ,我们往往采用梯度下降算法来进行优化。举个例子: 线性SVM的得分函数和损失函数分别为: 一般来说,我们是需要求损失函数的最小值,而损失函数是关于权值矩阵的函数。为了求解权值矩阵,我们一般采用数值求解的方法,但是为什么是梯度呢? 在CS2 阅读全文

posted @ 2016-08-11 16:37 mitutao 阅读(1666) 评论(0) 推荐(0) 编辑

2016年8月8日

卷积层参数说明

摘要: 阅读全文

posted @ 2016-08-08 16:10 mitutao 阅读(679) 评论(0) 推荐(0) 编辑

2016年8月5日

用caffe跑自己的数据,基于WINDOWS的caffe

摘要: 本文详细介绍,如何用caffe跑自己的图像数据用于分类。 1 首先需要安装过程见 http://www.cnblogs.com/love6tao/p/5706830.html 同时依据上面教程,生成了caffe.exe 2 构建自己的数据集。分为train和val 两个数据集,本次实验为2分类任务, 阅读全文

posted @ 2016-08-05 23:24 mitutao 阅读(20011) 评论(10) 推荐(0) 编辑

2016年8月4日

BP算法笔记

摘要: 阅读全文

posted @ 2016-08-04 19:41 mitutao 阅读(349) 评论(0) 推荐(0) 编辑

上一页 1 ··· 5 6 7 8 9 10 11 12 下一页

导航