数据归一化和两种常用的归一化方法

转载 2014年09月25日 12:47:44

数据标准化(归一化)处理是数据挖掘的一项基础工作,不同评价指标往往具有不同的量纲和量纲单位,这样的情况会影响到数据分析的结果,为了消除指标之间的量纲影响,需要进行数据标准化处理,以解决数据指标之间的可比性。原始数据经过数据标准化处理后,各指标处于同一数量级,适合进行综合对比评价。以下是两种常用的归一化方法:

一、min-max标准化(Min-Max Normalization)

也称为离差标准化,是对原始数据的线性变换,使结果值映射到[0 - 1]之间。转换函数如下:

clip_image002

其中max为样本数据的最大值,min为样本数据的最小值。这种方法有个缺陷就是当有新数据加入时,可能导致max和min的变化,需要重新定义。

二、Z-score标准化方法

这种方法给予原始数据的均值(mean)和标准差(standard deviation)进行数据的标准化。经过处理的数据符合标准正态分布,即均值为0,标准差为1,转化函数为:

clip_image004

其中clip_image006为所有样本数据的均值,clip_image008为所有样本数据的标准差。

参考文献:

http://webdataanalysis.net/data-analysis-method/data-normalization/

转载自:http://www.cnblogs.com/chaosimple/p/3227271.html

机器学习中数据归一化和两种常用的归一化方法

机器学习、数据挖掘工作中,数据前期准备、数据预处理过程、特征提取等几个步骤几乎要花费数据工程师一半的工作时间。同时,数据预处理的效果也直接影响了后续模型能否有效的工作。然而,目前的大部分学术研究主要集...
  • suibianshen2012
  • suibianshen2012
  • 2016-05-09 14:07:09
  • 9938

机器学习中常见的几种归一化方法以及原因

在机器学习中,数据归一化是非常重要,它可能会导致模型坏掉或者训练出一个很奇怪的模型,为了让机器学习的模型更加适合实际情况,需要对数据进行归一化处理。 1.机器学习中常用的归一化方法: 2. 不同归...
  • UESTC_C2_403
  • UESTC_C2_403
  • 2017-07-22 20:19:39
  • 3864

归一化(标准化)两种常用方法

归一化(标准化)两种常用方法 数据标准化(归一化)处理是数据挖掘的一项基础工作,不同评价指标往往具有不同的量纲和量纲单位,这样的情况会影响到数据分析的结果,为了消除指标之间的量纲...
  • jacke121
  • jacke121
  • 2018-01-08 23:26:06
  • 267

数据归一化小结

在各种模型训练,特征选择相关的算法中,大量涉及到数据归一化的问题。比如最常见的情况是计算距离,如果不同维度之间的取值范围不一样,比如feature1的取值范围是[100,200],feature2的取...
  • bitcarmanlee
  • bitcarmanlee
  • 2016-05-09 14:46:53
  • 14020

数据归一化及两种常用归一化方法

数据标准化(归一化)处理是数据挖掘的一项基础工作,不同评价指标往往具有不同的量纲和量纲单位,这样的情况会影响到数据分析的结果,为了消除指标之间的量纲影响,需要进行数据标准化处理,以解决数据指标之间的可...
  • u010599509
  • u010599509
  • 2016-07-04 14:39:42
  • 6512

数据规范化(归一化)方法

数据挖掘中,在训练模型之前,需要对特征进行一定的处理,最常见的处理方式之一就是数据的规范化。数据的规范化的作用主要有两个:去掉量纲,使得指标之间具有可比性;将数据限制到一定区间,使得运算更为便捷。...
  • zxd1754771465
  • zxd1754771465
  • 2017-06-22 09:03:38
  • 1180

机器学习中的归一化方法(Normalization Method)

机器学习、数据挖掘工作中,数据前期准备、数据预处理过程、特征提取等几个步骤几乎要花费数据工程师一半的工作时间。同时,数据预处理的效果也直接影响了后续模型能否有效的工作。然而,目前的大部分学术研究主要集...
  • dulingtingzi
  • dulingtingzi
  • 2016-05-10 18:31:48
  • 3738

数据归一化方法大全

在数据分析之前, 我们通常需要先将数据标准化 ( normalization ) , 利用标准 化后的数据进行数据分析。 数据标准化也就是统计数据的指数化。 数据标准化处 理主要包...
  • junmuzi
  • junmuzi
  • 2015-10-05 20:01:25
  • 3807

数据归一化的方法总结

数据的标准化(normalization)是将数据按比例缩放,使之落入一个小的特定区间。在某些比较和评价的指标处理中经常会用到,去除数据的单位限制,将其转化为无量纲的纯数值,便于不同单位或量级的指标能...
  • ghostlv
  • ghostlv
  • 2016-04-15 16:13:22
  • 1798

机器学习的数据归一化方法

作用:对于不同的特征向量,比如年龄、购买量、购买额,在数值的量纲上相差十倍或者百千倍。如果不归一化处理,就不容易进行比较、求距离,模型参数和正确度精确度就会受影响,甚至得不出正确的结果。 举个例子:...
  • qq_23617681
  • qq_23617681
  • 2016-05-21 12:09:51
  • 3169
收藏助手
不良信息举报
您举报文章:数据归一化和两种常用的归一化方法
举报原因:
原因补充:

(最多只允许输入30个字)