机器学习的发展方向

纯属个人总结：

1.优化方式：随机梯度下降（SGD）

2.训练类别：增强学习（Reinforcement Learning）

3.生成式模型：产生式对抗网络(GAN)

4.可靠性与准确率提升：模型组合，竞争以及投票（boosting and ensembling）

5.概率分布的重要性：单个神经元的概率分布, 参数限制以及变分方法（distribution and variational methods）

6.拒绝判决或者置信度的研究(abstention, rejection or confidence)