12 2020 档案

自动调参
摘要：网格搜索，就是假设有n个超参数，每个超参数有m个候选值，复杂度就是O() 随机搜索，n个参数组成n维空间，先随机一个向量x，在以x为球心的超球面上随机选一个点，如果这个点比x更优，就替换掉x 阅读全文
posted @ 2020-12-30 18:19 WeiAR 阅读(183) 评论(0) 推荐(0) 编辑
数据增强
摘要：翻转 旋转 缩放 裁剪 移位 高斯噪音 CycleGan改变风格 回译法 随机近义字替换 随机邻近字置换 随机字删除 调整亮度、对比度 阅读全文
posted @ 2020-12-30 10:09 WeiAR 阅读(67) 评论(0) 推荐(0) 编辑
Dropout
摘要：神经元按一定概率p失活 目的是为了防止过拟合，是正则化的手段之一 不会依赖局部特征 相当于训练了很多模型，进行了模型融合 输出的时候也要*p 阅读全文
posted @ 2020-12-30 09:58 WeiAR 阅读(232) 评论(0) 推荐(0) 编辑
SGD + momentum
摘要：SGD + momentum SGD是利用一个mini-batch的数据来近似估计梯度，有陷入局部最优或者马鞍点的问题 momentum是说当前梯度也受之前的梯度的影响，用加权的方式。可以按照光流的思想去类比理解。 阅读全文
posted @ 2020-12-29 20:25 WeiAR 阅读(174) 评论(0) 推荐(0) 编辑
Xavier 权重初始化
摘要：Xavier 初始化 在随机初始化的基础上*（1/sqrt(Din)) 在标准正态分布上乘一个常数c，会变成均值为0，标准差为c的分布 //https://blog.csdn.net/shuzfan/article/details/51338178 输出 y = wx ，这个方差咋算？ var(y) 阅读全文
posted @ 2020-12-29 19:00 WeiAR 阅读(180) 评论(0) 推荐(0) 编辑
为什么要zero-center?
摘要：在反向传播的时候能够加快收敛，避免all positicv or negetive && Z字型逼近最优解 阅读全文
posted @ 2020-12-29 11:30 WeiAR 阅读(260) 评论(0) 推荐(0) 编辑
实验12
摘要：特征点检测与匹配 #include <bits/stdc++.h> #include <opencv2/opencv.hpp> #include "opencv2/core.hpp" #include "opencv2/imgproc.hpp" #include "opencv2/video.hpp 阅读全文
posted @ 2020-12-27 09:23 WeiAR 阅读(95) 评论(0) 推荐(0) 编辑
如何搭建一个本地局域网？
摘要：1.先进入到想传文件的文件夹 cd /* / * 2.终端输入 python -m http.server 8000 8000是端口号 3.在浏览器上 ip:port 就可以直接下载访问了 只要在同一个局域网下，都可以下载文件 阅读全文
posted @ 2020-12-22 09:46 WeiAR 阅读(961) 评论(0) 推荐(0) 编辑