学习率 收敛 算法稳定

 

学习率  　　　　　　　　　　优缺点 　　　　　　　　　　使用场景

小学习率　　　　　　　　收敛慢，但结果精确　　　　　　若算法不稳定，先降低学习率

大学习率 　　　　　　　 结果不精确，但收敛快　　　　　 若算法收敛太慢，可提高学习率