白化（Whitening）：PCA vs. ZCA

2019独角兽企业重金招聘Python工程师标准>>>

教程地址：斯坦福深度学习

白化

什么是白化？

维基百科给出的描述是：

即对数据做白化处理必须满足两个条件：

1. 使数据的不同维度去相关；

2. 使数据每个维度的方差为1；

条件1要求数据的协方差矩阵是个对角阵；条件2要求数据的协方差矩阵是个单位矩阵。

为什么使用白化？

教程给出的解释是：

假设训练数据是图像，由于图像中相邻像素之间具有很强的相关性，所以用于训练时输入是冗余的。白化的目的就是降低输入的冗余性。

比如在独立成分分析（ICA）中，对数据做白化预处理可以去除各观测信号之间的相关性，从而简化了后续独立分量的提取过程，而且，通常情况下，数据进行白化处理与不对数据进行白化处理相比，算法的收敛性较好。

PCA白化 与 ZCA白化

PCA 白化