摘要: 如何理解K-L散度(相对熵) Kullback-Leibler Divergence,即K-L散度,是一种量化两种概率分布P和Q之间差异的方式,又叫相对熵。在概率学和统计学上,我们经常会使用一种更简单的、近似的分布来替代观察数据或太复杂的分布。K-L散度能帮助我们度量使用一个分布来近似另一个分布时所 阅读全文
posted @ 2018-12-23 21:57 小小川流 阅读(1223) 评论(0) 推荐(0) 编辑
摘要: 贝叶斯决策 简单例子引入 先验概率 后验概率 最小错误率决策 最小风险贝叶斯决策 简单的例子 正常情况下,我们可以快速的将街上的人分成男和女两类。这里街上的人就是我们观测到的样本,将每一个人分成男、女两类就是我们做决策的过程。上面的问题就是一个分类问题。 分类可以看作是一种决策,即我们根据观测对样本 阅读全文
posted @ 2018-12-23 15:08 小小川流 阅读(458) 评论(0) 推荐(0) 编辑
摘要: 原 极大似然估计详解 2017年05月28日 00:55:10 知行流浪 阅读数:124758 所属专栏: 人工智能相关 2017年05月28日 00:55:10 知行流浪 阅读数:124758 所属专栏: 人工智能相关 所属专栏: 人工智能相关 版权声明:本文为博主原创文章https://极大似然 阅读全文
posted @ 2018-12-23 13:42 小小川流 阅读(268) 评论(0) 推荐(0) 编辑