3.对神经网络训练中Epoch的理解

 

代表的是迭代的次数，如果过少会欠拟合，反之过多会过拟合

EPOCHS

当一个完整的数据集通过了神经网络一次并且返回了一次，这个过程称为一个 epoch。

 

然而，当一个 epoch 对于计算机而言太庞大的时候，就需要把它分成多个小块。

 

为什么要使用多于一个 epoch？

我知道这刚开始听起来会很奇怪，在神经网络中传递完整的数据集一次是不够的，而且我们需要将完整的数据集在同样的神经网络中传递多次。但是请记住，我们使用的是有限的数据集，并且我们使用一个迭代过程即梯度下降，优化学习过程和图示。因此仅仅更新权重一次或者说使用一个 epoch 是不够的。

 

 

随着 epoch 数量增加，神经网络中的权重的更新次数也增加，曲线从欠拟合变得过拟合。

 

那么，几个 epoch 才是合适的呢？

不幸的是，这个问题并没有正确的答案。对于不同的数据集，答案是不一样的。但是数据的多样性会影响合适的 epoch 的数量。比如，只有黑色的猫的数据集，以及有各种颜色的猫的数据集。