会员
周边
众包
新闻
博问
闪存
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
outthinker
博客园
首页
新随笔
联系
订阅
管理
2020年12月9日
学习率余弦退火衰减策略
摘要: 参考链接:https://blog.csdn.net/weixin_35848967/article/details/108493217 出发点: 因为我们的目标优化函数可能是多峰的(如下图所示),除了全局最优解之外还有多个局部最优解,在训练时梯度下降算法可能陷入局部最小值,此时可以通过突然提高学习
阅读全文
posted @ 2020-12-09 17:57 outthinker
阅读(3073)
评论(0)
推荐(0)
编辑
公告