python数据框中每列相加_python – Pandas数据帧中每两列的总和

本文介绍了两种方法在Python的Pandas数据框中计算每两列的和。一种方法使用groupby结合axis参数,另一种利用numpy的reduceat函数,后者在性能上更快。内容包括具体的代码实现和性能测试。
摘要由CSDN通过智能技术生成

1)通过提供axis = 1来执行w.r.t列的groupby.根据Per @ Boud的评论,你可以通过分组数组中的小调整得到你想要的结果:

df.groupby((np.arange(len(df.columns)) // 2) + 1, axis=1).sum().add_prefix('s')

根据这种情况进行分组:

np.arange(len(df.columns)) // 2

# array([0, 0, 1, 1, 2, 2], dtype=int32)

df = pd.DataFrame(np.add.reduceat(df.values, np.arange(len(df.columns))[::2], axis=1))

df.columns = df.columns + 1

df.add_prefix('s')

时间限制:

对于横跨20列的100万行DF:

from string import ascii_lowercase

np.random.seed(42)

df = pd.DataFrame(np.random.randint(0, 10, (10**6,20)), columns=list(ascii_lowercase[:20]))

df.shape

(1000000, 20)

def with_groupby(df):

return df.groupby((np.arange(len(df.columns)) // 2) + 1, axis=1).sum().add_prefix('s')

def with_reduceat(df):

df = pd.DataFrame(np.add.reduceat(df.values, np.arange(len(df.columns))[::2], axis=1))

df.columns = df.columns + 1

return df.add_prefix('s')

# test whether they give the same o/p

with_groupby(df).equals(with_groupby(df))

True

%timeit with_groupby(df.copy())

1 loop, best of 3: 1.11 s per loop

%timeit with_reduceat(df.copy()) # 3X faster)

1 loop, best of 3: 345 ms per loop

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值