随笔分类 - machine learning
摘要:Machine Learning --007 自助法(Bootstrap)和极大似然法 如何对一堆数据进行建模分析?我们可以通过统计推断。比如我们可以求得其平均值/方差,然后看其接近哪种分布,这就是对数据的一种建模。 统计模型分两种,一种是参数模型,一种是非参数模型。前者,举个例子,我们可以通过设定
阅读全文
摘要:Machine Learning --006 偏差、方差以及模型复杂度 问题导出:回归方法有很多。可以线性回归,可以多项式回归,可以KNN...但怎样选择、设置模型,才能更好地预测从相同分布中抽样得到的未来数据?我们必须有个有效的判断方法。 模型选择及评估 模型选择: 比较不同模型的表现选择最好的一
阅读全文
摘要:Machine Learning 005 局部多项式回归 局部多项式回归的拟合 局部多项式回归的拟合,需要我们在每个点 完成以下目标: $$ \min_{α(x_0),β_j(x_0),j=1,...,d} ∑_{i=1}^N K_λ(x_0,x_i)[y_i - α(x_0) - ∑^d_
阅读全文