Python机器学习:corr()探索自变量与因变量的相关性

可以用相关矩阵corr()探索哪些变量与因变量是有强相关关系的,再用sort_values()将数据从大到小排序,并配合使用plot()对数据进行可视化,让结果更加直观。相关性弱的变量对模型的训练并没有帮助,因此可以把相关性弱的变量删除,只保留强相关的变量。

train.corr()['fraud_reported'].sort_values(ascending = False).plot(kind='bar')

代码讲解:

train是数据集;

train.corr()调用相关矩阵的函数,生成相关矩阵;

train.corr()['fraud_reported']筛选其中的一列,也就是自变量与因变量的相关关系所在的那一列;

sort_values()是排序函数,sort_values()里不加参数 指的是从小到大排序;排序函数里面的ascending = False参数 指从大到小排序;

plot()是折线图,plot(kind='bar')指柱状图;

对train数据集连续用了3个方法,分别是:①corr()生成相关矩阵;②把所需的字段fraud_reported筛选出来后,用sort_values()函数进行排序;③用plot()生成柱状图;

运行结果:


图太小了,可以用figure()函数调整画布大小:

import matplotlib.pyplot as plt
plt.figure(figsize=(15,8))

代码讲解:

plt是包名的简写,在前面有import过;

figsize里面的两个数字代表宽度和高度,这里设置宽15高8;

运行结果:

 可以发现,age、policy_annual_premium等几个特征与因变量的相关系数几乎为0,说明对结果的影响很小,可以进行删除处理。

  • 5
    点赞
  • 9
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
### 回答1: Pandas中的DataFrame.corr()函数用于计算DataFrame中各列之间的相关系数。该函数返回一个矩阵,其中包含每对列之间的相关系数。默认情况下,它使用Pearson相关系数计算,但可以通过method参数指定使用其他相关系数计算,如Spearman或Kendall。 示例: ``` import pandas as pd df = pd.DataFrame({'A': [1, 2, 3], 'B': [4, 5, 6], 'C': [7, 8, 9]}) print(df.corr()) ``` 输出: ``` A B C A 1.0 -1.0 -1.0 B -1.0 1.0 1.0 C -1.0 1.0 1.0 ``` 可以看出对于A,B,C三个字段之间的相关性. ### 回答2: Python pandas库中的DataFrame.corr()函数用于计算DataFrame对象中的列之间的相关性。 该函数的语法如下: DataFrame.corr(method='pearson', min_periods=1) 参数说明: - method:相关性计算方法,可选值为'pearson'(默认)、'kendall'和'spearman'。 - 'pearson'表示使用皮尔逊相关系数衡量相关性,该系数是最常用的相关性度量,适用于线性相关的情况; - 'kendall'使用肯德尔相关系数衡量相关性,适合非线性但单调递增或递减的相关关系; - 'spearman'使用斯皮尔曼相关系数衡量相关性,也适用于非线性但单调递增或递减的相关关系。 - min_periods:计算相关系数所需的最小观测值数,即样本量,缺失值不计入样本量。 该函数会返回一个相关性矩阵,其中行和列分别表示DataFrame对象的列名,对角线元素为1,其余元素代表对应列之间的相关性。相关系数的取值范围为[-1, 1],其中1表示完全正相关,-1表示完全负相关,0表示无相关性。 示例: ```python import pandas as pd # 创建样本数据 data = {'A': [1, 2, 3, 4, 5], 'B': [2, 4, 6, 8, 10], 'C': [3, 6, 9, 12, 15]} df = pd.DataFrame(data) # 计算相关性矩阵 corr_matrix = df.corr() print(corr_matrix) ``` 输出结果为: ``` A B C A 1.0 1.0 1.0 B 1.0 1.0 1.0 C 1.0 1.0 1.0 ``` ### 回答3: Python中的pandas库是数据分析领域中使用广泛的工具包,它提供了强大的数据结构和数据分析函数。其中的DataFrame是一种二维数据结构,类似于Excel表格,而corr函数是DataFrame对象中的一个方法,用于计算不同列之间的相关性corr函数的用法很简单,只需要将要计算相关性的列作为参数传入即可。具体来说,可以通过以下代码来使用corr函数: ```python import pandas as pd # 创建一个示例DataFrame data = {'Col1': [1, 2, 3, 4, 5], 'Col2': [2, 4, 6, 8, 10], 'Col3': [3, 6, 9, 12, 15]} df = pd.DataFrame(data) # 使用corr函数计算相关性 correlation_matrix = df.corr() print(correlation_matrix) ``` 上述代码创建了一个DataFrame对象df,包含了三列数据。然后使用df.corr()来计算了这三列之间的相关性,结果存储在correlation_matrix变量中。最后,通过print函数将相关性矩阵打印出来。 输出结果会显示一个相关性矩阵,其中每个单元格的值表示对应两列之间的相关性系数。相关性系数的取值范围为-1到1,可以用来衡量变量之间的线性相关程度。如果相关性系数为正数(接近1),则表示变量之间存在正相关;如果相关性系数为负数(接近-1),则表示变量之间存在负相关;如果相关性系数接近0,则表示变量之间基本没有线性相关性。 总结来说,pandas库中的corr函数可以帮助我们快速计算DataFrame对象中不同列之间的相关性,从而帮助我们分析和理解数据的特征。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值