pandas分组计算平均值_【S01E09】pandas之分组级运算和转换

本文详细介绍了如何使用Pandas进行分组计算平均值,包括通过transform和apply方法进行数据转换。还讨论了分位数和桶分析,展示了如何使用cut和qcut进行分组。此外,文章还探讨了如何在不同分组中填充缺失值,并介绍了随机采样和排列数据的方法,为数据分析提供了实用技巧。
摘要由CSDN通过智能技术生成

93b82b633d1c79eaebd42489e7996539.png

聚合只不过是分组运算的其中一种而已。它是数据转换的一个特例,也就是说,它接受能够将一维数组简化为标量值的函数。接下来介绍的transform和apply方法,它们能够执行更多其他的分组运算。

i)添加用于存放各索引分组平均值的列

假设我们想要为一个DataFrame添加一个用于存放各索引分组平均值的列。一个办法是先聚合再合并:

dcdf4d54fa8c4d80dd1f5612415a87c7.png

先聚合:

b87d08bd619cb7576623f549f3286367.png

再合并:

eb5d1f20a74576940916b70f836fab03.png

虽然这样也行,但是不太灵活。你可以将该过程看作利用np.mean函数对两个数据列进行转换

ii)在GroupBy对象上使用transform方法

跟aggregate一样,transform也是一个有着严格条件的特殊函数:传入的函数只能产生两种结果,要么产生一个可以广播的标量值(如np.mean),要么产生一个相同大小的结果数组。

9d096b4d9fc9c80c0ab8b8303f4966a2.png

111cb748eb2356a448dd846cdbc377ca.png

不难看出,transform会将一个函数应用到各个分组,然后将结果放置到合适的位置上。如果各分组产生的是一个标量值,则该值就会被广播(broadcast)出去。

现在,假设你希望从各分组中减去平均值。为此,我们先创建一个距平化函数(demeaning function),然后将其传给transform:

abc5b9ab7a7fb78ec78b7070585edc83.png

apply:一般性的“拆分-应用-合并”

最一般化的GroupBy方法是apply,重点讲解它。如下图所示,apply会将待处理的对象拆分成多个片段,然后对各片段调用传入的函数,最后尝试将各片段组合到一起

回到之前的小费数据集,假设你想要根据分组选出最高的5个tip_pct值。首先,编写一个选取指定列中具有前n个最大值的行的函数:

77d6339a47008ec66845a1b7341d38fe.png

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值