sigmod函数=1/(1+e^(-z));
tanh函数=(e^z-e^(-z))/(e^z+e^(-z));
一般来说tanh函数都比sigmod更优越,除非输出层为二元分类。
tanh函数平均值接近0,范围(-1,1);
而sigmod函数接近0.5,范围(0,1)。