TensorFlow01:梯度下降

梯度消失:

学习过程中权重的值变的非常大,以至于溢出,导致NaN值。解决梯度消失的问题
1.重新设计网络    2.调整学习率   3.使用梯度截断(限制梯度的大小)  4.使用激活函数

 

posted @ 2019-09-15 05:04  Jumpkin1122  阅读(146)  评论(0编辑  收藏  举报