三种线性模型的分类应用

三种模型的损失函数：

ys物理意义：分类的正确度

PLA中，ys>0代表分类正确，error为0

error（0，1）的上限：

优化logistic regretion（每一步都要把N带入算）
方法：随机梯度下降


SGD省去了判断是否到谷底，因此在判断是否停下时，只能跑足够多次，不去计算。

OVA多类别分类

把一个类别当⚪，其他当X，跑K遍。选出概率最大的。
缺点：当K较大时，⚪和X差值较大，容易变成选X（正确率较高）
改进：只选其中两个类别（OVO）

1：方块 2：方块 3：方块 4：像菱形 5：像星星 6：像星星