【dlbook】数学基础
摘要:
【代数】 Moore-Penrose 伪逆 【概率信息论】 自信息,香农熵,衡量两个分布的差异:kl散度 \ 交叉熵 【数值】 溢出: softmax计算的时候要关注上溢和下溢,如果所有X都相等且为很小的负数的话,有分母为零的风险。 病态条件: 矩阵求逆对输入的误差可能很敏感,这样由于输入的不精确, 阅读全文
posted @ 2018-01-25 11:10 yesuuu 阅读(217) 评论(0) 推荐(0) 编辑