归一化（Normalization）和标准化（Standardization）

归一化和标准化是机器学习和深度学习中经常使用两种feature scaling的方式，这里主要讲述以下这两种feature scaling的方式如何计算，以及一般在什么情况下使用。

归一化的计算方式：

 

 上述计算公式可以将特征的值规范在[0, 1]之间，使用归一化来进行feature scaling一般是要求所有参数都处于正值范围。

标准化的计算公式：

 

 通过上述公式计算得到的特征值遵循均值为0方差为1，大部分情况下均推荐使用标准化的方式进行feature scaling。