2022年4月21日
摘要: 对抗训练参考博客:https://wmathor.com/index.php/archives/1537/ 虚拟对抗训练:https://zhuanlan.zhihu.com/p/96106267 阅读全文
posted @ 2022-04-21 20:45 啥123 阅读(17) 评论(0) 推荐(0) 编辑
摘要: 1问题描述 下面这个式子是交叉熵损失函数,p代表预测值,p*代表标签的真实值。 如果p=sigmoid(x),损失函数L对x求导可以得到下面的这个式子: 我们定义了g这一变量,它的含义是梯度范数 g的值代表了样本预测的难易程度,g的值越大,代表预测越困难。预测值p与真实值p*越接近,g的值越小,下面 阅读全文
posted @ 2022-04-21 10:51 啥123 阅读(281) 评论(0) 推荐(0) 编辑