周总结 4.4-4.11

图像识别：图像识别近年来取得重大突破，主要突破点在深度学习和卷积神经网络，成绩的大幅提升几乎都伴随着卷积神经网络的层数加深

 

 

 

 

 

 

 

深度学习获得发展的原因：

　　大规模高质量标注数据集的出现

　　并行计算的发展

　　更好的非线性激活函数的使用relu代替logistic

　　更多优秀的网络结构的发明：resne，googlenet

　　深度学习开发平台的发展：tensorflow ，pytorch

　　新的正则化技术的出现：批标准化，dropout等

　　更多稳健的优化算法：sgd的变种，如RmSprop，adam等