巧用聚合函数实现跨行数据的合并

最新推荐文章于 2023-08-02 15:38:35 发布
最新推荐文章于 2023-08-02 15:38:35 发布
阅读量212 收藏
点赞数
文章标签： 数据分析 python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/aquariusmao/article/details/118187635
版权

前几天做能力验证的题，有道题要求把网页上的数据导出到csv中，实际操作过程中，把网页数据复制到Excel之后，有一列数据出现了跨行的情况，最后颇费了一点周折总算解决了，今天就在这里做一个分享。

如下图，我们看到在详细信息这一列数据里，有部分数据有跨行的情况。

首先我们用ffill函数，对“通道/所属账号”这一列里的数据做向下填充

df1['通道/所属账号'] = df1['通道/所属账号'].ffill()

然后用groupby函数把数据按“通道/所属账号”列的数据分组，和sum函数将同一组的数据进行合并，就能得到我们要的结果。

df2 = df1.fillna('').groupby(['通道/所属账号']).sum()

aquariusmao
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
盘点 Pandas 中用于合并数据的 5 个最常用的函数！
zhuxiao5的博客
10-18 2111
作者：阿南整理：小五如何在Pandas合并数据，大家肯定都不陌生。作为一个初学者，我发现自己学了很多，却没有好好总结一下。正好看到一位大佬 Yong Cui 总结的文章，我就按照他的方法...
数据库自动合并数据函数
lance_kl的博客
12-09 659
最近项目中有遇到需要列转行的情况，稍微总结一下。 Oracle中： 函数：WM_CONCAT（）（注意：11G版本使用，12G版本需要自己创建） 作用：可以把列值用“，”分隔开，而且是显示成一行； 例子： 表名：shopping ----------------------------------------- u_id goods num _...
pandas入门——数据合并merge函数
Nick的博客
08-15 9499
数据合并merge函数 创建数据集 # 导入pandas和numpy包 import pandas as pd import numpy as np# 创建两个数据框 df_left = pd.DataFrame(data=np.ones((5,6)),columns=["a","b","c","d","e","f"],index=["k1","k2","k3","k4","k5"]) df_rig
sql 聚合函数 多行数据合并一行_Excel多表数据合并解法总结（函数、VBA、PQ、SQL...）...
weixin_32486581的博客
01-06 944
每天一篇Excel技术图文微信公众号：Excel星球NO.673-多表数据查询作者：看见星光微博：EXCELers / 知识星球：ExcelHI~大家好，我是星光。今天给大家分享一下Excel合并多工作表数据的多种方法，涵盖了函数、VBA、PQ、SQL等……。打个响指，举个例子。如上图所示▲，一张工作簿包含了多张工作表，现在需要将一部门、二部门、三部门、四部门和后勤部等5张工作表的数据...
WPS/MS Office Excel获取某区域的数值，跨行获取数值，INDEX函数
XXXXX_AAAAA的博客
04-11 3653
获取Excel某区域的数值时，可使用INDEX函数：INDEX(区域, 行, [列], [区域序数])。 1.从一列获取值，使用公式：INDEX(区域, 行)； 2.从多列获取值，使用公式：INDEX(区域,行,列)； 3.从多个区域获取值，使用公式：INDEX(区域,行,列,区域序数)； 4.跨行获取值，使用公式：INDEX(区域, 带有ROW()的公式, [列], [区域序数])。
基于pandas实现的跨多数据源的数据处理与统计工具
最新发布
05-08
内置的聚合函数（如mean、median、sum、count等）和描述性统计方法（如describe）可以帮助我们快速了解数据的基本特征。此外，还可以通过groupby操作对数据进行分组，然后应用各种统计函数，实现按类别统计。例如，...
Python-基于pandas实现的跨多数据源的数据处理与统计工具
08-10
- pandas可以整合来自不同数据源的数据，通过`concat()`、`merge()`或`join()`等方法实现数据合并。 - `concat()`用于将多个DataFrame对象沿着轴方向连接起来。 - `merge()`和`join()`用于根据特定列（键）合并...
excle 数据操作大全
05-28
- 数据聚合：使用函数如SUM、COUNT、AVERAGE等进行统计计算，以及更复杂的分组聚合操作。 - 数据透视表：通过编程实现类似Excel内置的数据透视表功能，进行多维度数据分析。 4. **跨sheet和跨文件操作**： - 在...
使用SQL管理和查询数据.doc
08-27
4. 分组查询：通过`GROUP BY`对数据进行分组，配合聚合函数（如`COUNT`、`SUM`、`AVG`、`MAX`、`MIN`）进行统计分析。 5. 子查询：嵌套`SELECT`语句，用于在查询中执行更复杂的逻辑。 七、查询进阶 1. 联接查询：...
etl数据整合模拟卷.doc
10-15
它允许我们将数据按照一个或多个字段进行分组，然后对每个组进行聚合函数（如 SUM, AVG, COUNT 等）的计算。例如，如果我们想要统计每个部门的员工数量，可以使用 `GROUP BY` 来实现。 2. **ETL 过程** ETL 是 ...
python 将excel 多行进行分组合并
LOVESD
08-02 1508
【代码】python 将excel 多行进行分组合并。
【Py】【Pandas】使用groupby实现类似Excel纵向合并单元格操作
MacwinWin的博客
04-22 3769
最近一个项目需要使用Pandas对数据中某几列进行类似Excel中的合并单元格操作 首先想到的是使用dataframe的set_index()方法 通过测试，发现也确实能实现 但是，一旦两条数据不相临，合并就失效了 我们可以使用dataframe的groupby方法 groupby更多是用在分组统计中，比如groupby().count()，而且groupby()后返回的是DataFrameGroupBy对象，而非DataFrame。但我们这里可以可以通过agg(lambda x: x)对分组后的数据
值得收藏，Python 合并数据的5个函数
Python数据挖掘
05-07 2895
前几天在一个群里面，看到一位朋友，说到自己的阿里面试，被问了一些关于pandas的使用。其中一个问题是：pandas中合并数据的5中方法。 今天借着这个机会，就为大家盘点一下pandas中合并数据的5个函数。但是对于每个函数，我这里不打算详细说明，具体用法大家可以参考pandas官当文档。喜欢记得收藏、关注、点赞。 【注】完整代码、数据、技术交流，文末提供 join主要用于基于索引的横向合并拼接； merge主要用于基于指定列的横向合并拼接； concat可用于横向和纵向合并拼接； appe
df.fillna()函数，参数method中pad’, ‘ffill’,‘backfill’, ‘bfill’, None取值的几种不同
weixin_45456209的博客
08-12 1万+
DataFrame.fillna(value=None,method=None,axis=None,inplace=False,limit=None,downcast=None) method参数的取值 ： {‘pad’, ‘ffill’,‘backfill’, ‘bfill’, None}, default None pad/ffill：用前一个非缺失值去填充该缺失值 backfill/bfill：用下一个非缺失值填充该缺失值 None：指定一个值去替换缺失值（缺省默认这种方式 ...
填补缺失值的两种方法ffill和bfill
weixin_43041009的博客
06-05 2万+
Pandas填充缺失值两种方法：bfill/ffill对比
pandas入门——数据合并concat函数
Nick的博客
08-15 7793
数据合并concat函数 创建数据框 # 导入pandas与numpy包 import pandas as pd import numpy as np# 创建两个index与columns有重合的数据框 df1 = pd.DataFrame(data=np.ones((5,6))*1,columns=["a","b","c","d","e","f"],index=[0,1,2,3,4]) df2 =
fillna()函数详解
热门推荐
大胡子的博客
07-26 16万+
inplace参数的取值：True、False True：直接修改原对象 False：创建一个副本，修改副本，原对象不变（缺省默认） method参数的取值 ： {‘pad’, ‘ffill’,‘backfill’, ‘bfill’, None}, default None pad/ffill：用前一个非缺失值去填充该缺失值 backfill/bfill：用下一个非缺失值填充该缺失...
MySQL之常用函数、聚合函数以及合并
qq_59025975的博客
09-07 285
1、笛卡尔集 笛卡尔集会在下面条件下产生: ①、 省略连接条件 ②、连接条件无效 ③、 所有表中的所有行互相连接 ④、为了避免笛卡尔集， 可以在 WHERE 加入有 效的连接条件。 2、等值/连接连接 ①、使用连接在多个表中查询数据 （1） 在 WHERE 子句中写入连接条件； （2）在表中有相同列时，在列名之前加上表名前缀。 ②、区分重复的列名 （1） 在不同表中具有相同列名的列可以用表的别名加以区分。 （2）如果使用了表别名，则在select语句中需要使用表别名代替表名。 （3
import pandas as pd 报错_pandas数据分析核心技能-分组统计计算
weixin_39774808的博客
11-27 524
对数据集进行分组并对各组应用一个函数(无论是聚合还是转换)，这是数据分析工作中的重要环节。在将数据集准备好之后，通常的任务就是计算分组统计或生成透视表。pandas提供了一个灵活高效的gruopby功能，它使你能以一种自然的方式对数据集进行切片、切块、摘要等操作。关系型数据库和SQL(Structured Query Language，结构化查询语言)能够如此流行的原因之一就是其能够方便地对数据进...
用elasticsearch聚合函数实现distinct查询
05-23
在 Elasticsearch 中，可以使用聚合函数来实现类似于 SQL 的 `DISTINCT` 查询。具体的实现步骤如下： 1. 创建一个聚合请求，指定要聚合的字段。 ``` { "aggs": { "unique_field": { "terms": { "field": ...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值