摘要:
对于2个变量的样本回归分析,L2和L1正则化基本相同,仅仅正则化项不同 LASSO回归为在损失函数加入$||\omega||_1$ ,\(\omega\) 的1范数 而 岭回归为$||\omega||_2^2$,\(\omega\) 的2范数 *矩阵、向量范数 *L1正则化(岭回归) #LASSO 阅读全文
摘要:
样本 $$x_i=(x_{i1};x_{i2}; ...; x_{im}) \, {函数值 y_i}$$ 每个样本有m个变量 回归面 $$f(x_i) = x_i^T \omega +b $$ $\omega = (\omega_1; \omega_2; ...; \omega_m)$ $$\hat 阅读全文