摘要:
指数分布族 The exponential family 因为广义线性模型是围绕指数分布族的。大多数常用分布都属于指数分布族,服从指数分布族的条件是概率分布可以写成如下形式: η 被称作自然参数(natural parameter),或正则参数canonical parameter),它是指数分布族 阅读全文
摘要:
Logistic Regression 逻辑回归 1.模型 逻辑回归解决的是分类问题,并且是二元分类问题(binary classification),y只有0,1两个取值。对于分类问题使用线性回归不行,因为直线无法将样本正确分类。 1.1 Sigmoid Function 因为 y∈{0,1},我 阅读全文
摘要:
机器学习三要素 机器学习的三要素为:模型、策略、算法。 模型:就是所要学习的条件概率分布或决策函数。线性回归模型 策略:按照什么样的准则学习或选择最优的模型。最小化均方误差,即所谓的 least-squares(在spss里线性回归对应的模块就叫OLS即Ordinary Least Squares) 阅读全文