数据的聚合与运算

本文介绍了Pandas库中的Groupby和聚合函数如agg()的使用方法。通过示例展示了如何进行数据分组并计算平均值、求和等统计指标。同时,对比了agg()和apply()的区别,agg()在处理多个函数时更为便捷,而apply()则适用于更复杂的自定义操作,如数据缺失值处理和topN计算。
摘要由CSDN通过智能技术生成

1.Groupby
Grouyby是pandas中最常用和有效的分组函数,有sum(),count(),mean()等
e.g
import pandas as pd
import numpy as np
a=pd.DataFrame({'key1':list('aabba'),
'key2':['one','two','one','two','one'],
'data1':np.random.randn(5),
'data2':np.random.randn(5})
grouped=a.groupby(a['key1'])
print grouped.mean()
a.groupby(lambda x:'even' if x%2==0 else 'odd').mean()
2.聚合agg()
e.g
a=DataFrame({'key':['a','a','b','b','a'],
                       'key2':['one','two','one','two','one'],
                        'data1':np.random.randn(5),
                        'data2':np.random.randn(5)})
grouped=a.groupby('key1')
print grouped.agg('mean')
#apply()和agg()功能上差不多,apply()常常用来处理不同分组的缺失数据的填充和top N的计算,会产生级层索引,而agg可以同时传入多个函数,作用于不同的列
e.g
a=DataFrame({'key1':['a','a','b','b','a'],
                        'key2':['one','two','one','two','one'],
                        'data1':np.random.randn(5),
                        'data2':np.random.randn(5)})
grouped=a.groupby('key1')
print grouped.agg(['sum','mean']) 
print grouped.apply(np.sum)
apply和agg功能上基本是相近的,但是多个函数的时候还是agg比较方便
apply本身的自由度很高,如果分组之后不做聚合操作,仅仅是一些观察的时候,apply就有用武之地了
e.g
print grouped.apply(lambda x: x.describe())

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值