归一化、标准化、正则化——作用&意义

1、归一化(Normalization)：

        1.1 归一化概念与作用

             １）概念：

                   将一列数据变化到某个固定区间(范围)中，通常，这个区间是[0, 1]，广义的讲，可以是各种区间，比如映射到[0，1]一样可以继续映射到其他范围，图像中可能会映射到[0,255]，其他情况可能映射到[-1,1]；                                

                  主要是为了数据处理方便提出来的，把数据映射到0～1范围之内处理，更加便捷快速。

             ２）作用：

                    把有量纲表达式变成无量纲表达式，便于不同单位或量级的指标能够进行比较和加权。归一化是一种简化计算的方式，即将有量纲的表达式，经过变换，化为无量纲的表达式，成为纯量。

2、标准化(Standardization)：

        2.1 标准化概念与作用

                    1）概念：

                        将数据变换为均值为0，标准差为1的分布切记，并非一定是正态的；

                        

               2）作用：

                       是处理不同特征类型的资料的数据预处理，简化计算，

3、中心化（又称0均值化Zero-centered）：

        平均值为0，对标准差无要求，计算方法：原始数据 - 均值 x' = x - μ

4、三者之间区别

•  归一化和标准化的区别：（简单来说归一化的分母是大于等于标准化的分母的，