读书笔记：Deep Learning [Ada-Computation&ML series]--chapter13.Linear factor model

part0.ICA vs PCA

1.相同：

1）都是要找是的一个n维的w，使得sum(wi*xi)的某种特征最大。

2.PCA

1)假设源信号间彼此非相关。（根据 相关的定义，仅指的是 线性相关）

2）主元之间彼此正交，样本呈高斯分布

3）认为最有用的信号体包含在方差里。因此要找到一个方向是的在该方向的投影的方差最大。然后在于第一个最大方差方向正交的方向里面找最大。这样就找到一列不相关的随机变量。

3.ICA

1)假设源信号间独立

2)要求数据源是非高斯