摘要: 非线性回归问题的参数求解,反向求导基本流程。Variable 计算时, 它在后台一步步默默地搭建着一个庞大的系统, 叫做计算图, computational graph. 这个图将所有的计算步骤 (节点) 都连接起来, 最后进行误差反向传递的时候, 一次性将所有 variable 里面的修改幅度 ( 阅读全文
posted @ 2017-12-09 17:11 demianzhang 阅读(405) 评论(0) 推荐(0) 编辑
摘要: 转自:https://sherlockliao.github.io/2017/07/10/backward/ backward只能被应用在一个标量上,也就是一个一维tensor,或者传入跟变量相关的梯度。 特别注意Variable里面默认的参数requires_grad=False,所以这里我们要重 阅读全文
posted @ 2017-12-09 16:04 demianzhang 阅读(5204) 评论(1) 推荐(0) 编辑