摘要：
正则化，是减少泛化误差的技术。 阅读全文
摘要：
支持向量机（Support Vector Machine，简称SVM），属于监督学习。 核技巧（kernel trick） 名字很吓人，乍一听完全不懂什么意思，但其实它的名字是很有意义的。 1）首先，要清楚空间中点和向量的联系：一个点可以看成是以原点为起点，该点为终点的向量。例如，二维空间中，向量( 阅读全文
摘要：
Adam算法 阅读全文
摘要：
矩阵求导 参考链接： https://en.wikipedia.org/wiki/Matrix_calculus#Scalar-by-vector_identities 阅读全文
摘要：
最大似然估计 阅读全文
摘要：
最小二乘法 参考链接： https://zhuanlan.zhihu.com/p/27204466 阅读全文
摘要：
前馈神经网络（Feedforward Neural Network，简称FNN），也叫多层感知机（Multilayer Perceptron，简称MLP）。FNN的目标是通过学习参数θ，得到最佳的函数y=f(x;θ)，例如分类器，输入x，输出类别y。 1、前馈 也叫前向，信息单向流动，从输入层到隐藏 阅读全文