摘要: http://www.jianshu.com/p/c97ff0ab5f49 总结shuffle 过程: map端的shuffle: (1)map端产生数据,放入内存buffer中; (2)buffer满的时候,将buffer里面的数据按照key来快排,然后写到磁盘中; (3)上面每次buffer满都 阅读全文
posted @ 2016-12-19 21:23 coldyan 阅读(225) 评论(0) 推荐(0) 编辑
摘要: 1 为什么随机梯度下降法能work? https://www.zhihu.com/question/27012077中回答者李文哲的解释 2 随机梯度下降法的好处? (1)加快训练速度(2)噪音可以使得跳出局部最优 3 权衡方差和偏差: 偏差反映的是模型的准确度(对训练数据的吻合程度),方差则反映模 阅读全文
posted @ 2016-12-19 00:00 coldyan 阅读(352) 评论(0) 推荐(0) 编辑