摘要: 权重初始化 参考资料: 1. "知乎" 2. "CSDN" 1. 权重初始化不能全部为0,不能都是同一个值。原因是,如果所有的初始权重是相同的,那么根据前向和反向传播公式,之后每一个权重的迭代过程也是完全相同的。结果就是,无论迭代多少次,这些权重都是一样的。 2. 不可以初始化为较大的随机值。原因是 阅读全文
posted @ 2018-03-18 23:21 匡子语 阅读(352) 评论(1) 推荐(0) 编辑