摘要：
1、调整过程 在训练神经网络时，超参数的调试十分重要，下面分享一些指导原则。 通常来说，①学习因子α是最重要的超参数，也是需要重点调试的超参数。②动量梯度下降因子beta、各隐藏层神经元个数hidden units和mini-batch size的重要性仅次于alpha。③然后就是神经网络层数lay 阅读全文
摘要：
1、Mini—batch梯度下降法（Mini-batch gradient descent) Mini-batch梯度下降是梯度下降的一种变体，广泛应用于机器学习中，特别是在神经网络的训练中。它在批量梯度下降（Batch Gradient Descent）和随机梯度下降（Stochastic Gra 阅读全文