第25月第11天 deeplearning.ai

1.网易云课堂 深度学习工程师

第一门 神经网络和深度学习

第二门 改善神经网络

第三门 结构化机器学习项目

第四门 卷积神经网络

第五门 序列模型

 

2.神经网络与深度学习反向传播算法的四项基本公式

 

(1). 输出层错误量的等式:
δLj=∂C∂aLjσ′(zLj)
δjL=∂C∂ajLσ′(zjL)

(2).依据下一层错误量δl+1δl+1获取错误量δlδl的等式:
δl=((wl+1)Tδl+1)⊙σ′(zl)
δl=((wl+1)Tδl+1)⊙σ′(zl)

(3).网络的代价函数相对于偏置的改变速率的等式:
∂C∂blj=δlj
∂C∂bjl=δjl

(4).网络的代价函数相对于权重的改变速率的等式:
∂C∂wljk=al−1kδlj
∂C∂wjkl=akl−1δjl
公式证明连接:1,2,3
本文用到的公式编辑方式:
公式编辑1,公式编辑2,公式编辑3

 

https://blog.csdn.net/u011031257/article/details/80916103

posted @ 2018-10-11 07:39  lianhuaren  阅读(129)  评论(0编辑  收藏  举报