python将文件夹中所有文件合并成一个csv文件

背景
文件夹2019 的文件为csv文件,文件夹2020的文件为excel文件
目的
将两个文件夹中所有的文件合并成一个表格,以便进行后续的数据分析
反思
因为是不同的文件格式,只能将文件分成两个文件夹,分两次遍历文件。
步骤
a:先遍历excel2020文件夹所有的文件,合并一个csv表至2019文件夹
b:遍历2019文件夹所有的文件名,合并csv终表。

#合并数据到Alldata文件夹下的Alldata文件
import os
import pandas as pd
import numpy as np


dir =r'D:\wechatdata\Year2020'#设置工作路径

#新建列表,存放文件名(可以忽略,但是为了做的过程能心里有数,先放上)
filename_excel = []

#新建列表,存放每个文件数据框(每一个excel读取后存放在数据框)
frames = []

for root, dirs, files in os.walk(dir):
    for file in files:
        #print(os.path.join(root,file))
        filename_excel.append(os.path.join(root,file))
        df = pd.read_excel(os.path.join(root,file)) #excel转换成DataFrame
        frames.append(df)
#打印文件名
print(filename_excel)   
 #合并所
  • 3
    点赞
  • 8
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值