降维 PCA MDS Isomap

此图引自      几种降维思想方法总结

PCA   为线性降维，MDS  及 Isomap非线性降维。

PCA主要思想是去掉线性相关的影响。原数据定了，降维得的维数也就定了，可以通过选择数据的损失程度来确定维数。

MDS与Isomap     Isomap是MDS的改进，MDS只要满足原维上和降维后的数据欧氏距离相等即可，Isomap是先通过KNN筛选，再进行MDS，所以Isomap有可能出现断路现象。Isomap实际是求近邻图的最短距离。