数据的预处理之数据规范化

数据规范化是数据挖掘中的关键步骤,用于将数据转换到特定区间,如[-1, 1]或[0, 1]。这在神经网络和距离度量算法中尤其重要,有助于加速学习和确保属性权重一致。常见的规范化方法包括按小数定标规范化、最小-最大值规范化和z-score规范化。每种方法有其优缺点,例如最小-最大值规范化可能因离群点而出现问题,而z-score规范化则对离群点处理较好,但计算复杂。" 135599764,20011709,复现思迅商旗Cashier-loaddata信息泄露漏洞,"['web安全', '漏洞复现']
摘要由CSDN通过智能技术生成

一、什么是数据规范化

数据规范化是数据挖掘中数据变换的一种方式,数据变换将数据转换或统一成适合于挖掘的形式。而数据规范化是指将被挖掘对象的属性数据按比例缩放,使其落入一个小的特定区间(如[-1, 1]或[0,1])。


二、数据规范化的作用

对属性值进行规范化常用于涉及神经网络或距离度量的分类算法和聚类算法中。比如使用神经网络向后传播算法进行分类挖掘时,对训练元组中度量每个属性的输入值进行规范化有助于加快学习阶段的速度。对于基于距离度量相异度的方法,数据规范化可以让所有的属性具有相同的权重。


三、数据规范化的三种方法

数据规范化的常用方法有三种:按小数定标规范化、最小-最大值规范化和z-score规范化。

1、按小数定标规范化

通过移动属性值的小数点位置进行规范化,通俗的说就是将属性值除以10的j次幂。公式为:

其中,j 是使得Max(||)<1的最大整数。比如,假设属性A的取值区间是A[-986,917]。则A的最大绝对值为986,显然只要将属性A中的值分别除以1000,就满足Max(|

  • 2
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值