PCA的eigenvalue,解出来的w,是orthonormal的,nerual network的gradient descent找出来的w,不一定是orthonormal的
LLE和t-SNE
LLE假设高纬度上,相邻的点,一个坐标轴方向上距离为0,使得另一个坐标轴上点的欧氏距离最小,但涉及3个或3个以上坐标轴时,不能假设其余坐标轴上的点的距离都为0,求一个坐标轴方向上的点的距离最小,所以要有限制条件,所得到的结果的维度要比原来的维度大
laplacian eigenmaps
支持向量机svd
Feature Disentangle
feature disentangle