2018年10月14日

004-神经网络

摘要: 神经网络公式与模型: 神经网络在计算机中的样子: 输入层和隐藏1层用w1链接,隐藏1和隐藏2层用w2链接,隐藏2层和输出层用w3链接。 那么w1应该是一个3×4的矩阵,表示有3个样本,4个特征。 线性很少能满足实际要求,于是非线性的函数出现了,max(0,w1x)称为激活函数 例如用sigmoid当 阅读全文

posted @ 2018-10-14 23:32 医疗兵皮特儿 阅读(174) 评论(0) 推荐(0) 编辑

003-神经网络基础-最优化,前向传播,反向传播

摘要: 最优化: 包括前向传播和反向传播 前向传播: 由w和x到损失函数loss的过程叫做前向传播 反向传播: 根据梯度下降的概念,找到最优的w的过程叫做反向传播。 做一件什么事情呢? 根据前向传播的w得到的loss,将loss反馈给上一次前向传播的w进行比较两次的w,看看哪个w使得loss小,那么就用小l 阅读全文

posted @ 2018-10-14 21:36 医疗兵皮特儿 阅读(466) 评论(0) 推荐(0) 编辑

002-神经网络基础-得分函数,SVM损失函数,正则化惩罚项,softmax函数,交叉熵损失函数

摘要: 得分函数: 将图片拉伸成一个一维矩阵x,也就是3072×1,最后要得出10个分类的得分值也就是10×1,那w就得是10×3072的矩阵,也就是10组3072个特征的权重值,乘以x,加上b,得到的一个10×1的矩阵,这个矩阵就是最终的每个分类的得分值。 假设将图像分为2×2个像素点,最后又3中类型,那 阅读全文

posted @ 2018-10-14 02:50 医疗兵皮特儿 阅读(1843) 评论(0) 推荐(0) 编辑

001-神经网络基础-K近邻算法

摘要: K-近邻算法: 如果K = 3,绿色圆点最近的3个邻居:2个红色三角,和1个蓝色矩形,少数从属多数,基于统计的算法,判定绿色圆点为红色三角一类。 如果K = 5,绿色圆点最近的5个邻居:2个红色三角,和3个蓝色矩形,少数从属多数,基于统计的算法,判定绿色圆点为蓝色矩形一类。 对于未知类别属性数据集中 阅读全文

posted @ 2018-10-14 01:52 医疗兵皮特儿 阅读(484) 评论(0) 推荐(0) 编辑

导航