pandas通过loc赋值对象为list时,生成多行的处理方法

最近项目组需要搞迁移,需要把每个hdfs的location路径mv到指定目录,每个表有多个分区,这时就需要处理,如何将多个分区生成多行,例如,一开始biads.ads_表对应的parition为空,

dbtablenamepartition
biadsads_ 

 通过程序获取表目前有三个分区['pt_d=20190601', 'pt_d=20190602', 'pt_d=20190603']

我期望变成

dbtablenamepartition
biadsads_pt_d=20190601
biadsads_pt_d=20190602
biadsads_pt_d=20190603

,直接上代码,没空解释

# -*- coding:utf-8 -*-
import pandas as pd

c = {
    'db': ['biads'],
    'tablename': ['ads_'],
    'partition':['']
}

df = pd.DataFrame(c)

print(df)

s = ['pt_d=20190601','pt_d=20190602','pt_d=20190603']

print(s)

frame = []

for i in s:
    a = [x for x in df[(df['db']=='biads') & (df['tablename']=='ads_')]['partition'].tolist() if x!='']
    if not a:
        df.loc[(df['db']=='biads') & (df['tablename']=='ads_'),['partition']] = str(i)
    else:
        l = df[(df['db']=='biads') & (df['tablename']=='ads_')].copy()
        l['partition']=str(i)
        frame.append(l)
frame.append(df)
r = pd.concat(frame)
print(r)

 

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值