11、改善深层神经网络之归一化输入

归一化方法:把数变为(0,1)之间的小数,主要是为了数据处理方便提出来的,把数据映射到0~1范围之内处理,更加便捷快速,应该归到数字信号处理范畴之内。
归一化输入分为两个步骤:

  第一步:subtract out or zero out the mean 零均值化,公式如下:

  第二步:normalize the variance 归一化方差,公式如下:

  其中:

关于神经网络归一化方法的整理

  由于采集的各数据单位不一致,因而须对数据进行[-1,1]归一化处理,归一化方法主要有如下几种

1、线性函数转换,表达式如下:

y=(x-MinValue)/(MaxValue-MinValue)

说明:x、y分别为转换前、后的值,MaxValue、MinValue分别为样本的最大值和最小值。

2、对数函数转换,表达式如下:

y=log10(x)

说明:以10为底的对数函数转换。

3、反余切函数转换,表达式如下:

y=atan(x)*2/PI

posted on 2021-08-20 16:10  Hzzhbest  阅读(124)  评论(0编辑  收藏  举报