摘要: L1正则是权值的绝对值之和,重点在于可以稀疏化,使得部分权值等于零。 L1正则的含义是 ∥w∥≤c,如下图就可以解释为什么会出现权值为零的情况。 L1正则在梯度下降的时候不可以直接求导,可以有以下几种方法来优化 1.OWL-QN算法http://blog.csdn.net/google1989010 阅读全文
posted @ 2017-04-12 11:15 fisherinbox 阅读(575) 评论(0) 推荐(0) 编辑