数据挖掘05-偏相关分析【原理、案例、python实现】

最新推荐文章于 2025-02-24 21:46:55 发布

SeafyLiang

最新推荐文章于 2025-02-24 21:46:55 发布

阅读量1.3w

点赞数 13

分类专栏：数据挖掘 Python自学机器学习文章标签：人工智能大数据数据分析数据挖掘 python

本文链接：https://blog.csdn.net/SeafyLiang/article/details/121667457

版权

参考资料：
基于数据驱动的电动汽车行驶里程模型建立与分析
 python怎么计算相关系数、偏相关系数？
利用PYTHON计算偏相关系数（Partial correlation coefficient)

一、需求场景

新能源电动车剩余里程预测

我们都知道，影响行驶里程的因素有很多，包括电池的剩余电量、电池性能(电池组放电总电压、电池组电池不一致性、单体电压、电池组内阻)、整车参数、车辆载重、车辆行驶特性及温度等因素。

针对电池性能（SOC、电压、电流和电池温度）和车辆行驶特性（速度）几个方面进行深入研究，实现行驶里程估计，从而达到预测剩余里程的目的。

二、偏相关分析简介

2.1 引入偏相关分析的原因

相关分析是处理变量与变量之间关系的一种统计方法，
从所处理的变量多少来看，
如果研究的是两个变量间的关系称为简单相关；
如果研究的是两个以上变量间的关系称为多元相关。
从变量之间的关系形式上看，有
线性相关分析；
非线性相关分析。
从统计思想和方法来看，
线性相关是最基本的方法。

在相关分析中，研究两事物之间的线性相关性是通过计算相关系数等方式实现，并通过相关系数值的大小来判定事物之间的线性相关强弱。

然而，当简单相关系数受其他因素的影响，它所反映的往往是表面的非本质的联系。此时要准确地反映两个变量之间的内在联系，就不能简单的计算相关系数，而是需要考虑偏相关系数。

2.2 什么是偏相关分析

偏相关分析也称净相关分析，它在控制其他变量的线性影啊的条件下分析两变量间的线性关系，通常用偏相关系数(即净相关系数)表示。

当控制变量个数为一时，偏相关系数称为一阶偏相关；
当控制变量个数为二时，偏相关系数称为二阶偏相关：
当控制变量个数为零时，偏相关系数称为零阶偏相关，即简单相关系数。

偏相关系数是在对其他变量的影响进行控制的条件下，衡量多个变量中某两个变量之间的线性相关程度的指标。所以，用偏相关系数来描述两个经济变量之间的内在线性联系会更合理、更可靠。

偏相关系数不同于简单相关系数，在计算偏相关系数时，需要掌握多个变量的数据，
一方面考虑多个变量之间可能产生的影响，另一方面又采用一定的方法控制其他变量，专门考察两个特定变量的净相关关系。

在多变量相关的场合，出于变量之间存在错综复杂的关系，因此偏相关系数与简单相关系数在数值上可能相差很大，有时甚至符号都可能相反。偏相关系数取值范围与简单相关系数一样，为**-1到1**。偏相关系数绝对值越大(越接近1)，表明变量之间的线性相关程度越高；偏相关系数绝对值越小(越接近0)，表明变量之间的线性相关程度越低。

2.3 偏相关分析的步骤

利用偏相关系数进行变量间净关系分析通常需要完成以下两大步骤：

（1）计算样本的偏相关系数

利用样本数据计算样本的偏相关系数，它反映了两变量间净相关的程度强弱。在分析变量x1和y1之间的净相关时，当控制了x2的线性作用后，x1和y1之间的一阶相关系数定义为：
在这里插入图片描述

ry1、ry2、r12分别表示y和x1的相关系数、y和x2的相关系数、x1和x2的简单相关系数

（2）对上一步求得的偏相关系数进行检验

净相关分析检验的基本步骤是：

提出假设，假设偏相关系数与零无显著性差异，即两个变量之间不线性相关。
选择检验统计量。偏相关分析的检验统计量为t统计量，它的数学定义为：

r为偏相关系数，n为样本数，q为阶数。t统计量服从n-q-2个自由度的t分布。
计算检验统计量的观测值和对应的概率p值。
决策。如果检验统计量的概率p值小于给定的显著性水平α（一般为0.05），应拒绝零假设，认为两总体的偏相关系数与零有显著性差异，即两变量之间有显著的线性相关关系；反之，如果检验统计量的概率p值大于给定的显著性水平α，则说明两变量之间没有显著线性相关关系。

三、【案例分析】行驶里程与影响因素的偏相关分析

在这里插入图片描述

由上表3-1可知，行驶里程和电池SOC的Pearson相关系数为-0.976，相关系数检验的概率p值都近似为0，说明两者之间具有很强的负线性相关关系，而其他变量与行驶里程之间的Pearson相关系数都偏小，说明他们之间的线性相关性并不明显，说明这些影响因素可能是通过非线性关系来影响行驶里程的变化的。

3.1 速度

为了分析电动车行驶速度和里程之间的关系，将【车速、soc、行驶里程】绘制曲线图进行分析：
在这里插入图片描述

图3-5为速度和形式里程的变化曲线图，从图中可以看出，速度的曲线上下波动较大。电池SOC从96%下降到47%的过程中，当速度为0时，行驶里程曲线为水平走向，说明此刻车辆处在停止状态，当速度不为0时，行驶里程开始逐渐增加，说明速度对行驶里程有很大影响。但是由之前的偏相关分析表3-1可知，速度和里程之间不是线性关系，因此采用每公里电量消耗百分比来分析。
在这里插入图片描述

图3-6为不同速度下的每公里电量消耗百分比散点图，从图中可以看出，速度从20km/h变化到90km/h的过程中，每公里电量消耗百分比是由大变小再变大，当速度为50%左右的时候，每公里电量消耗百分比会达到最小值。由此可以看出，速度对每公里电量消耗百分比影响显著，并通过影响每公里电量消耗百分比的形式来影响行驶里程的。从图中可以看出速度对每公里电量消耗百分比的影响呈现非线性关系。