摘要: 1:2D函数Himmelblau (1)用3D曲线表示2D函数 4个最小解 (2)pytorch中寻找最小解 第一步:先将2D函数Himmelblau用pytorch实现,并且将其进行可视化 【注】x,y分别是一个点的x坐标和y坐标。np.meshgrid(x,y)可以实现将x,y的范围传入其中。X 阅读全文
posted @ 2021-07-26 23:08 收购阿里巴巴 阅读(48) 评论(0) 推荐(0) 编辑
摘要: 1:MLP(Multi-Layer Perceptron)反向传播 (1)多层感知机模型 (2)反向传播的推到过程(主要使用链式法则): 【注】 W的上标表示第几层(也即是第几层输出层)。W的第一下标表示输入层的第几号节点,下标表示加权求和层(输出层)的第几号节点。 (3)最终推导结果: (4)单层 阅读全文
posted @ 2021-07-26 21:40 收购阿里巴巴 阅读(207) 评论(0) 推荐(0) 编辑
摘要: 1:链式法则:用于对权值参数的优化 (1)链式法则的求导过程 (2)在pytorch中验证链式法则 阅读全文
posted @ 2021-07-26 10:59 收购阿里巴巴 阅读(806) 评论(0) 推荐(0) 编辑