精确率和召回率 与 置信度之间的关系
1️⃣前言
混淆矩阵的更多信息可以查看我另外一篇文章
2️⃣召回率
可以看到召回率的分母是TP+FN,表示正样本的个数,是没有办法改变的,是客观的;那么只有TP发生变化的时候,召回率才会发生变化;因此,当置信度阈值调低之后,会导致很多阈值低的样本被认为是真,当然除了TP会增加,FP也会增加,但是FP并不会影响到召回率的大小;在最极端的情况下,阈值为0,所有样本预测为真,会导致TP+FP达到样本数量(正常来说:总样本=TP+FP+TN+FN),TP是最大值,那么可以认为置信度和召回率成反比。
3️⃣精确率
可以看到精确率的分母是TP+FP,表示预测为真的个数;如果我们调低置信度阈值,那么会导致TP+FP增多(在召回率也说过),这样精确率就会减低;当然也有人会说TP也会增加,但是在增长速度的比较下,TP没有TP+FP增加的快,毕竟是两个一起涨,所以说置信度和精确率成正比。
4️⃣总结
置信度和召回率成反比;
置信度和精确率成正比;
召回率和精确率成反比。
这几个指标在调节模型方面还是有很大的帮助的,特别是进行消融比较相同模型不同数据集下的优劣
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· Manus重磅发布:全球首款通用AI代理技术深度解析与实战指南
· 被坑几百块钱后,我竟然真的恢复了删除的微信聊天记录!
· 没有Manus邀请码?试试免邀请码的MGX或者开源的OpenManus吧
· 园子的第一款AI主题卫衣上架——"HELLO! HOW CAN I ASSIST YOU TODAY
· 【自荐】一款简洁、开源的在线白板工具 Drawnix