摘要: 1信息增益 划分数据的最大原则就是:将无序的数据变得更加有序。 在划分数据集之前之后信息发生的变化称为信息增益,通过计算每个特征值划分数据集获得的信息增益,获得信息增益最高的特征就是最好的选择。 度量集合信息的方式简称为熵。另一个度量集合无序程度的方法是基尼不纯度。 计算信息熵的代码实现 from 阅读全文
posted @ 2020-06-11 17:11 六神酱 阅读(329) 评论(0) 推荐(0) 编辑