4 降维

4 降维

01 主成分分析–PCA

• PCA选择的是投影后数据方差最大的方向。 由于它是无监督的， 因此PCA假设方差越大， 信息量越多， 用主成分来表示原始数据可以去除冗余的维度， 达到降维。

02 线性判别分析–LDA

• LDA选择的是投影后类内方差小、 类间方差大的方 向。 其用到了类别标签信息， 为了找到数据中具有判别性的维度， 使得原始数据 在这些方向上投影后， 不同类别尽可能区分开。

03 应用基本的原则

• 对无监督的任务使用PCA 进行降维， 对有监督的则应用LDA。