CNN试验记录
CIFAR-10
图像处理:(预处理还是很重要的)
数据随机裁剪,填充0
依概率p水平翻转
1.VGG16
SGD lr=0.01 momentum 0.9 weight_decay=0.0001
epoch=25 batchsize=128
测试集正确率 90.4%
修改lr /= 10 epoch=25
结果92.35%
2.ResNet系列
SGD lr = 0.1 momentum 0.9 weight_decay=0.0001
epoch = 200 batchsize=128
lr 在100时 /10=0.01
lr 在150时 /10=0.001
resnet20 92.24%
resnet56 93.58%
3.adam收敛速度超快,但是内存消耗大,VGG跑不了
-------------------------------------------------------------逆水行舟,不进则退。