Pandas merge 小坑:键值顺序的影响?

Pandas merge 小坑:键值顺序的影响?

一个常见的使用 pandas merge 两张表的场景如下:

表 a
    idx key1 key2
0   1   1   1
1   2   3   2
2   3   4   4
3   5   5   5
4   7   6   7
表 b
    id key2 key1
0   1   1   1
1   2   2   3
2   3   4   4
3   5   5   5
4   7   7   6

我们准备在 [key1, key2]上 merge 两张表

尽管表 a 和表 b 的 key1, key2 顺序不同,在普通 merge 时是不会出现问题的,指定on=[key1, key2]即可,表会分别去匹配两个键

a.merge(b, on=['key1', 'key2'], how='left')

   idx key1 key2 id
0   1   1   1   1
1   2   3   2   2
2   3   4   4   3
3   5   5   5   5
4   7   6   7   7

a.merge(b, on=['key2', 'key1'], how='left')

  idx key1 key2 id
0   1   1   1   1
1   2   3   2   2
2   3   4   4   3
3   5   5   5   5
4   7   6   7   7

但是如果是另一种 merge 场景:left表的列和right表的 index 合并,就会受到on=[]中键值顺序的影响

b = b.set_index(['key2', 'key1']) # 设置 b 表的 index 为要合并的列

a.merge(b, left_on=['key1', 'key2'], right_index=True, how='left')

# 输出
  idx key1 key2 id
0   1   1   1   1.0
1   2   3   2   NaN
2   3   4   4   3.0
3   5   5   5   5.0
4   7   6   7   NaN

可以看到left表按照left_on设置的键值顺序给出参与匹配的列,而right表是按照index顺序给出参与匹配的列,导致出现了没有匹配的情况

更换一下left_on的顺序,可以发现匹配就成功了

a.merge(b, left_on=['key2', 'key1'], right_index=True, how='left')

  idx  key1 key2 id
0   1   1   1   1
1   2   3   2   2
2   3   4   4   3
3   5   5   5   5
4   7   6   7   7

可以理解为,在left_onright_on分别指定的时候,指定的是left表和right表给出参与匹配的列的方式。其中right_index的设置就是right_on的一种特殊指定方式,表示right表给出tuple类型的index参与匹配,而tuple类型作为不可变类型,不具备按照指定列名重组顺序,再进行匹配的能力,而是以tuple整体给出

  • 1
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

MetLightt

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值