04 2024 档案
发表于 2024-04-19 11:19阅读:54评论:0推荐:0
摘要:参考: “损失函数”是如何设计出来的?直观理解“最小二乘法”和“极大似然估计法”_哔哩哔哩_bilibili “交叉熵”如何做损失函数?打包理解“信息量”、“比特”、“熵”、“KL散度”、“交叉熵”_哔哩哔哩_bilibili 《信息论基础》 基本损失函数 任务:衡量人脑与神经网络在判断一张图片是不
阅读全文 »
发表于 2024-04-12 10:55阅读:293评论:0推荐:0
摘要:参考: 一文搞懂熵(Entropy),交叉熵(Cross-Entropy) - 知乎 (zhihu.com) 交叉熵_百度百科 (baidu.com) 深度学习中的关键概念:交叉熵损失函数 (baidu.com) 交叉熵损失函数 1、信息熵 1.1、信息论中的熵 在信息论中,熵的定义:无损编码事件信
阅读全文 »