摘要: 交叉熵损失: 给定两个概率分布p和q,通过q来表示p的交叉熵为: 从上述公式可以看出交叉熵函数是不对称的,即H(p,q)不等于H(q,p)。 交叉熵刻画的是两个概率分布之间的距离,它表示通过概率分布q来表示概率分布p的困难程度。所以使用交叉熵作为 神经网络的损失函数时,p代表的是正确答案,q代表的是 阅读全文
posted @ 2017-12-16 22:23 blackx 阅读(12460) 评论(2) 推荐(0) 编辑
摘要: tensorflow变量 在tensorflow中,变量(tf.Variable)的作用就是用来保存和更新神经网络中的参数,在声明变量的同时需要指定其初始值。 tensorflow中支持的随机数生成器: tensorflow也支持使用常数来初始化一个变量,常用的常量生成函数如下表 如下代码声明变量的 阅读全文
posted @ 2017-12-16 01:17 blackx 阅读(1298) 评论(0) 推荐(1) 编辑