qq_41178350的博客

转载 Normalization - Batch Normalization

什么是Normalization Normalization（归一化），是一个统计学的概念。它对数据进行偏移和尺度缩放等操作，是数据预处理时的常见操作 为什么要使用Normalization Normalization可以提高梯度下降法求解最优解的速度 如下图所示， 左图中两个特征x1和x2尺度上相差非常大，X1区间是[0,2000]，X2区间是[1,5]，导致其所形成的等高线非常扁，当使用梯度下...