[pandas学习笔记] - 替换DataFrame列指定字段

key: pandas, DataFrame, dict, Series
DataFrame数据处理。希望将DataFrame将指定列的数据,根据指定字典,替换为对应字段。
由于需求不同,一般有两种情况:

  1. 不在映射规则中(字典),处理为NaN
  2. 不在映射规则中(字典),保留原值。

待处理数据

import pandas as pd
df = pd.DataFrame({'Date':['10/2/2011', '11/2/2011', '12/2/2011', '13/2/2011'],
                   'Event':['Music', 'Poetry', 'Theatre', 'Comedy'],
                   'Cost':[10000, 5000, 15000, 2000]})
print(df)

        Date    Event   Cost
0  10/2/2011    Music  10000
1  11/2/2011   Poetry   5000
2  12/2/2011  Theatre  15000
3  13/2/2011   Comedy   2000

method1 - replace

保留原值

df = pd.DataFrame({'Date':['10/2/2011', '11/2/2011', '12/2/2011', '13/2/2011'],
                   'Event':['Music', 'Poetry', 'Theatre', 'Comedy'],
                   'Cost':[10000, 5000, 15000, 2000]})
dict = {'Music' : 'M', 'Poetry' : 'P', 'Theatre' : 'T', 'xxx' : 'C'}
df = df.replace({"Event": dict})
print(df)

        Date   Event   Cost
0  10/2/2011       M  10000
1  11/2/2011       P   5000
2  12/2/2011       T  15000
3  13/2/2011  Comedy   2000

method2 - map

置为NaN

df = pd.DataFrame({'Date':['10/2/2011', '11/2/2011', '12/2/2011', '13/2/2011'],
                   'Event':['Music', 'Poetry', 'Theatre', 'Comedy'],
                   'Cost':[10000, 5000, 15000, 2000]})
dict = {'Music' : 'M', 'Poetry' : 'P', 'Theatre' : 'T', 'xxx' : 'C'}
df["Event"] = df["Event"].map(dict)
print(df)
    
        Date Event   Cost
0  10/2/2011     M  10000
1  11/2/2011     P   5000
2  12/2/2011     T  15000
3  13/2/2011   NaN   2000

method3 - map + lambda

保留原值

df = pd.DataFrame({'Date':['10/2/2011', '11/2/2011', '12/2/2011', '13/2/2011'],
                   'Event':['Music', 'Poetry', 'Theatre', 'Comedy'],
                   'Cost':[10000, 5000, 15000, 2000]})
dict = {'Music' : 'M', 'Poetry' : 'P', 'Theatre' : 'T', 'xxx' : 'C'}
df["Event"] = df["Event"].map(lambda x: dict[x] if x in dict else x)
print(df)
    
        Date   Event   Cost
0  10/2/2011       M  10000
1  11/2/2011       P   5000
2  12/2/2011       T  15000
3  13/2/2011  Comedy   2000

method4 - update

保留原值(注意,这里的映射字典改变了

df = pd.DataFrame({'Date':['10/2/2011', '11/2/2011', '12/2/2011', '13/2/2011'],
                   'Event':['Music', 'Poetry', 'Theatre', 'Comedy'],
                   'Cost':[10000, 5000, 15000, 2000]})
dict = {0 : 'M', 1 : 'P', 2 : 'T', 999 : 'C'}
df["Event"].update(pd.Series(dict))
print(df)
    
        Date   Event   Cost
0  10/2/2011       M  10000
1  11/2/2011       P   5000
2  12/2/2011       T  15000
3  13/2/2011  Comedy   2000

其他

method3 - map + lambdamethod1 - replace快了1-2倍左右。

测试数据:
循环100次 %timeit -n100 code

rowsmethod3method1
46us14us
710240us750us

循环1000次
在这里插入图片描述

https://www.heelpbook.net/2020/python-pandas-using-dictionary-to-remap-values-in-dataframe/

  • 1
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值