算法知识点-神经网络预处理

1、数据标准化：
零均值标准化（每个样本值减去均值）；
Min-Max标准化（求取最大值和最小值每个样本与最小值之差除以最大最小差）；
2、神经网络归一化：
随机初始化、BatchNorm、layernorm等，加快网络拟合；
3、PCA降维和百画（首先通过零均值，然后再通过协方差矩阵求得特征值特征向量，然后投影降维，求解其相关性）。