使用pd.merge进行表连接，出现多余行的问题

路明非Re

已于 2022-05-06 18:45:47 修改

阅读量1.9k

点赞数 2

分类专栏：吉鹿文章标签： python

于 2022-05-06 15:53:40 首次发布

本文链接：https://blog.csdn.net/yefan_001/article/details/124611893

版权

在尝试使用pandas的merge函数进行左外连接表1（论文及出版物）和表2（出版物及其指标）时，发现连接后的表比原始表多了13行。原因在于表2中存在出版物的重复行，如出版物A对应多个指标。通过删除表2中的重复出版物信息，成功解决了这一问题，确保了连接结果的正确性。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

本文的目标是将表1论文及出版物与表2出版物及其指标进行匹配。
表1 论文出版物信息（存在空值）
表2 出版物指标信息
利用pandas的merge函数实现表的左外连接。左外连接即左表的外连接，左表保持不变，匹配右表的行（合并后右表肯能存在空值）。

paperPublicationIndicator = pd.merge(paperPublication,publicationIndicator,
    how='left',left_on='出版物',right_on

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

路明非Re

关注关注

2
点赞
踩
3

收藏

觉得还不错? 一键收藏
1
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

Pandas数据处理与分析

平凡简单的执着

12-04

3万+

关于 Pandas 如何由来的，这里就不过多介绍了（有兴趣可以去了解了解他的历史）。Pandas 是基于NumPy 的一种工具，该工具是为了解决数据分析任务而创建的。Pandas 纳入了大量库和一些标准的数据模型，提供了高效地操作大型数据集所需的工具，而且Pandas提供了大量能使我们快速便捷地处理数据的函数和方法。他主要有以下功能：为浮点数和与浮点数精度丢失提供了简易的处理方法。大数据（数...

python 数据框合并之后行变多了_python – pandas：merged(内部联接)数据框的行数多于原始行...

weixin_42309599的博客

01-28

3645

我在Jupyter Notebook上使用python 3.4,尝试合并两个数据框,如下所示：df_A.shape(204479, 2)df_B.shape(178, 3)new_df = pd.merge(df_A, df_B, how='inner', on='my_icon_number')new_df.shape(266788, 4)我认为上面合并的new_df应该比df_A少几行,因为...

1 条评论您还未登录，请先登录后发表或查看评论

“pandas中的按列合并两个DataFram后行数增多“的解决办法

Hi_hai_Feng的博客

01-07

4765

定义两个Dataframe df1 = pd.DataFrame(data=[[1, 2, 3], [4, 5, 6], [7, 8, 9]], columns=['a', 'b', 'c'], index=[0, 1, 2]) df2 = pd.DataFrame(data=[[11], [22], [33]], columns=['d'], index=[1, 2, 3]) 按列合并 df = pd.concat([df1, df2], axis=1) 结果按我预想的应该是三行，但是结果却是4

python 数据框合并之后行变多了_Python：熊猫合并了多个数据框

weixin_39565777的博客

01-13

438

I have diferent dataframes and need to merge them together based on the date column. If I only had two dataframes, I could use df1.merge(df2, on='date'), to do it with three dataframes, I use df1.merg...

谈谈pandas merge 的一个深坑，莫名其妙多出来一行

Reach Higher

01-31

2万+

merge 在 pandas 里面的基本用法 pd.merge([df1, df2], on=’ ‘, how=’ left/right/inner’) df1.merge(df2, on=’ ‘, how=’ ') 如果你要拼接的两个dataframe中，有一个相同的关键字段，且两个列名是相同的，就可以指定 on=‘column name’ 接下来看例子 df1 = pd.DataFrame...

pd.merge合并shp文件和excel数据文件错误返回Traceback (most recent call last)

最新发布

03-27

当使用 `pd.merge` 将 Shapefile 和 Excel 数据合并时，如果遇到错误提示 `Traceback (most recent call last)`，这通常表明程序运行过程中出现了异常。以下是可能的原因以及解决方案： #### 可能原因分析 1. **...

3.8 合并数据集：合并与连接

ceerfuce的博客

08-18

524

3.8 合并数据集：合并与连接 pd的基本特性之一就是高性能的内存式数据连接join与合并merge操作。pd的主接口是merge函数。 3.8.1 关系代数合并的理论基础是关系代数 3.8.2 数据连接的类型 merge实现三种数据连接类型：一对一，多对一，多对多。 import pandas as pd import numpy as np class display(obj...

pd.concat 合并后多出几行

12-30

### 解决Pandas合并数据框时出现多余行的问题当使用 `pandas` 的 `concat` 或者 `merge` 函数来组合数据框时，可能会遇到额外的行被创建的情况。这通常是因为默认行为或参数配置不当所引起的。 #### 使用 `concat...

使用 pandas 进行数据预处理

西门催学不吹雪

02-16

3743

文章目录1. 合并数据1.1 堆叠合并数据1.1.1 横向堆叠 1. 合并数据 1.1 堆叠合并数据堆叠就是简单地把两个表拼在一起，也被称作轴向连接、绑定或连接。依照连接轴的方向，数据堆叠可以分为横向堆叠和纵向堆叠。 1.1.1 横向堆叠横向堆叠，即将两个表在 x 轴方向拼接在一起，可以使用 concat 函数完成。 pandas.concat(objs, axis=0, join='...

pd.merge 结果出现重复_用数组计算不重复数据的个数原来这么简单

weixin_39812065的博客

12-17

1159

日常工作中，我们常常会遇到一些带有重复值的数据列。例如下面表格中的姓名列，标红色的是重复数据，那么问题来了——如何统计表格中不重复数据的个数呢？当然，我们可以用透视表或者用删除重复值的功能，然后再用COUNT函数统。今天，给大家两个公式，来计算不重复数据的个数以及在指定条件下的不重复个数的计算。01不重复个数的计算公式首先来看如何计算C列的不重复姓名个数，直接上公式：这是一个数组公式，输入完后需要...

left join 后数据变多_数据处理进阶pandas入门（十二）

weixin_39594312的博客

11-27

1580

回顾在数据处理进阶pandas入门(十一)中，我们介绍了pandas中的一些简单常见的数值计算和统计相关方法，这些方法都是在使用pandas处理数据时会经常用到的方法。今天我们看一下另一个数据处理的重要功能——pandas中的合并功能。 pandas具有全功能、高性能的在内存中进行连接操作的特性，这与SQL等关系型数据库非常相似。pandas中主要使用merge()和join()这两个方法来合并...

python如何输入多行数据合并_python-加入/合并数据框并保留行顺序

weixin_39628343的博客

11-24

236

我在python和pandas中工作.假设我有以下两个数据帧df_1和df_2(INPUT)：# df1A B C0 2 8 61 5 2 52 3 4 93 5 1 1# df2A B C0 2 7 NaN1 5 1 NaN2 3 3 NaN3 5 0 NaN我想对其进行处理以加入/合...

Pandas 合并多个Dataframe（merge,concat）

热门推荐

chixujohnny

03-29

13万+

在数据处理的时候，尤其在搞大数据竞赛的时候经常会遇到一个问题就是，多个表单的合并问题，比如一个表单有user_id和age这两个字段，另一个表单有user_id和sex这两个字段，要把这两个表合并成只有user_id、age、sex三个字段的表怎么办的，普通的拼接是做不到的，因为user_id每一行之间不是对应的，像拼积木似的横向拼接肯定是不行的。pandas中有个merge函数可以做到这个实用的

pd.merge合并后行数不符预期原因

a645061612的博客

03-01

787

pd.merge 的笛卡尔积，依赖键值在左右表中不唯一的处理方式

pandas使用merge之后出现重复数据解决方案

ljhgrb的博客

07-06

2143

利用pandas merge出现的问题

python合并excel出现多余列等问题

weixin_50626279的博客

10-28

1456

python合并excel

DataFrame.merge()数据拼接导致数据维度增加？？

lekusun9671的博客

05-29

1743

今天在处理数据的时候，进行数据拼接，两个包含1488条数据的df文件同时两个df有公共列(因为害怕是公共列数据不一致原因导致维度发生变化，专门重新设置了一遍) merge：原因是：公共列中存在重复值，第一列是公共列元素取值，第二列是每个元素出现的次数：在merge的过程中，第一个df中的每个记录会与第二个df中所有与它有相同index值的记录拼接起来，所以上面...

01-pandas 数据连接 Merge 数据重复问题

qq_39036707的博客

08-14

9671

Python pd.merge()函数介绍（全）

m0_61635017的博客

04-15

1万+

在数据合并操作中，有两个操作函数和pd.merge()这两个函数在使用过程中经常会拿来比较，只要我们弄懂了其中重要参数的意义，理解每一个函数的用法，就能做到在那种环境适用那个函数,让我们通过本文深入理解pd.merge().参数表参数名作用left拼接的左侧DataFrame对象right拼接的右侧DataFrame对象on要加入的列或索引级别名称。必须在左侧和右侧DataFrame对象中找到。

Python中pd.merge中对5个表进行表连接的示例

04-24

好的，以下是一个Python中使用pd.merge函数对5个表进行表连接的示例： ``` import pandas as pd # 第1个数据表 df1 = pd.DataFrame({ 'key': ['A', 'B', 'C', 'D'], 'value1': [1, 2, 3, 4] }) # 第2个数据表 ...