策码奔腾
2021年8月10日
度量信息的两种方式：信息熵和基尼不纯度
摘要： 1.信息熵公式： p(x)为某个特征的概率，介于0到1之间 2.基尼不纯度公式： p(i)为某个特征的概率，介于0到1之间 3.假设某集合只有一个分类，该分类有相反的两个特征，那么 信息熵公式可以简化为-xlog2x-(1-x)log2(1-x)，对应图像： 基尼不纯度公式可以简化为x(1-x)，对 阅读全文
posted @ 2021-08-10 17:16 策码奔腾 阅读(650) 评论(0) 推荐(0) 编辑
console.log('欢迎');