python 合并文件夹下 Excel 文件并去重(xlsx 与 CSV 格式)

  1. xlsx 格式

代码如下:

import pandas as pd
#
# 此处的Excel_dir 可以是组件,‘查找文件’的返回值
excel_dir = ['//mac/Home/Desktop/考试信息数据归档/人员信息2.xlsx', '//mac/Home/Desktop/考试信息数据归档/人员信息.xlsx']

li = []
for i in excel_dir:
	li.append(pd.read_excel(i))
	print('已合并' + i)
# 合并完成后的excel,是放在excel文件夹下的
writer = pd.ExcelWriter('//mac/Home/Desktop/考试信息数据归档/人员信息汇总1.xlsx')
pd.concat(li).to_excel(writer, 'Sheet1', index=False)
writer.save()
print('合并完成')

frame = pd.read_excel('//mac/Home/Desktop/考试信息数据归档/人员信息汇总1.xlsx')
data = pd.DataFrame(frame)
print(data)
data.drop_duplicates(['*账号'], keep='first', inplace=True)
# drop_duplicates用法:subset=‘需要去重复的列名’,keep=‘遇到重复的时保留第一个还是保留最后一个’,inplace=‘去除重复项,还是保留重复项的副本’
data.to_excel('//mac/Home/Desktop/考试信息数据归档/人员信息汇总1.xlsx')
print('去重完成')

合并是按照Excel的表头去合并的,会将

  • 2
    点赞
  • 11
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值