卷积层的可视化理解

1.什么是“风格”

要计算风格损失函数，我们首先需要知道“风格(Style)”是什么。

我们使用L

层的激活来度量“Style”，将“Style”定义为通道间激活值之间的相关系数。(Define style as correlation between activation across channels)

那么我们如何计算这个所谓的相关系数呢？

下图是我们从上图中所标识的第l层，为方便说明，假设只有5层通道

如上图示，红色通道和黄色通道对应位置都有激活项，而我们要求的便是它们之间的相关系数。

但是为什么这么求出来是有效的呢？为什么它们能够反映出风格呢？

2.图像风格的直观理解

如图风格图像有5层通道，且该图像的可视化特征如左下角图所示。

其中红色通道可视化特征如图中箭头所指是垂直条纹，而黄色通道的特征则是橘色背景。

那么通过计算这两层通道的相关系数有什么用呢？

其实很好理解，如果二者相关系数性强，那么如果出现橘色背景，那么就应该很大概率出现垂直条纹。反之，亦然。

利用反pool，反卷积 去可视化特征

3.风格相关系数矩阵