数据分析中异常值的应用

异常值的概念

异常值，不符合正态分布或者不符合业务逻辑的数据，统称为异常值。

异常值的剔除

1.异常值不符合正常的，误差等不符合规律。
2.让数据符合规律，让某些不符合业务逻辑的数据进行剔除。

异常值的成因

1.人为造成，人工造成的影响。偶然和必然原因影响。
2.机器造成，受到电脑等因素影响。
3.事件规律造成，受什么指标因素影响。

异常值的预警

1.故障分析：判断电路故障
2.偏离值分析：判断经济变化的影响因素
3.渐变、突变分析，看数据走势变化
4.异常值和极端值的影响和限定
5.离群值的特殊原因是什么
6.高杠杆值是指从自变量x的角度来看属于异常的值
7、强影响值是指对模型影响较大的值，也就是说，如果删除了该值，会导致模型发生很大变化（如系数值改变较大）。
8.异常值的特例，偶然和必然的影响因素。
9.直接删除异常值的点，就无法真正发现这种规律
10.假设所有的数据是正常的，当某一个数据发生变化则说明出现毛病和故障。
11.分析常态的是常态的结论，分析异常的是超乎寻常的结论，更能振聋发聩，醍醐灌顶。（突然听到了什么声音，一下明白了）