pandas如何多行变一行(对文本进行拼接和聚合)?

1.场景介绍

有时候在进行汇总计算时,我们需要将处理前的数据转换为处理后的数据。
处理前:
处理前
处理后:
![处理后](https://img-blog.csdnimg.cn/5ecdb4ef28c54fefb1db7fa37d7749e8.png

2.实现方法

提前做好数据准备工作:

import pandas as pd
#准备数据
df = pd.DataFrame({'姓名': ['A', 'A', 'B', 'B', 'C', 'C', 'C'],
                  '部门':['销售部', '销售部', '销售部', '销售部', '人事部', '人事部', '人事部'],
                  '管理区域':['华南', '华北', '华中', '华东', '华南', '华北', '华中']})
df
2.1 实现方法基础版
result=df.groupby(df['姓名']).agg(所在部门=('部门',lambda x:','.join(x.unique())),
    所管理区域=('管理区域',lambda x:','.join(x.unique()))).reset_index()
2.2 进一步探索

按照2.1里的方法我们就可以达到预期,但是当聚合的字段非常多的时候,我们就要面临写多个匿名函数的麻烦,不是很方便,那么该如何解决这个问题?

def string_concat(column_name,sep=','):
    return sep.join(column_name.unique())
result=df.groupby(df['姓名']).agg(所在部门=('部门',string_concat),
    所管理区域=('管理区域',string_concat)).reset_index()
result
2.3 再升级一下

基于2.2我们解决了重复写匿名函数的麻烦,但实际情况中,如果我们对多列采取不同的分隔符时,又不是很人性化,那又该如何解决这一问题?

def custome_str_cat(sep='|'):
    def str_cat(column_name):
        return sep.join(column_name.unique())
    if sep:
        return str_cat
result=df.groupby(df['姓名']).agg(所在部门=('部门', custome_str_cat('*')), 所管理区域=('管理区域',
                                                           custome_str_cat()), 所管理区域2=('管理区域', custome_str_cat('—'))).reset_index()

实现后效果图如下:
2.3效果图

3.写在最后

以上就是关于文本类的聚合函数,相当于postgresql数据库中的string_agg函数,Oracle中的wm_concat函数,MySQL中的GROUP_CONCAT函数。那么如何在pandas中将一行转为多行?即将本篇文章中处理后的数据转为处理前的数据,可以参考本篇博客,传送门:https://blog.csdn.net/qq_41780234/article/details/121623812?spm=1001.2014.3001.5502

  • 3
    点赞
  • 27
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
可以使用Pandas库中的groupby()函数和agg()函数将多行重复数据合并成一行。具体的做法是先读取多行数据到一个Pandas的DataFrame中,然后使用groupby()函数对重复的数据进行分组,最后使用agg()函数将每组数据合并成一行。示例代码如下: ```python import pandas as pd # 读取多行数据到一个DataFrame中 df = pd.read_csv('data.csv') # 使用groupby()函数对重复的数据进行分组,然后使用agg()函数将每组数据合并成一行 merged_df = df.groupby(['col1', 'col2'])['col3'].agg(lambda x: ' '.join(x)).reset_index() # 输出合并后的DataFrame print(merged_df) ``` 在上面的示例代码中,我们假设数据已经保存在一个名为`data.csv`的CSV文件中,然后使用Pandas库的read_csv()函数将数据读取到一个DataFrame中。接着使用groupby()函数对DataFrame中的重复数据进行分组,指定分组的列为`col1`和`col2`,并指定需要合并的列为`col3`。最后使用agg()函数对每组数据进行合并,将`col3`列中的多行数据合并成一行,并使用空格分隔。最后使用reset_index()函数将合并后的DataFrame的索引重新编号,然后将结果输出到屏幕上。 需要注意的是,上面的示例代码只是一种合并数据的方式,具体的实现方式需要根据实际情况进行调整。另外,如果需要将多列数据合并成一列,只需要在agg()函数中指定多个列名,然后使用空格或其他分隔符进行连接即可。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

theskylife

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值