python 合并多文件中的csv文件

最新推荐文章于 2024-09-04 10:31:20 发布

Joa_cccc

最新推荐文章于 2024-09-04 10:31:20 发布

阅读量1.2k

点赞数

文章标签： python

本文链接：https://blog.csdn.net/Joa_cccc/article/details/126343538

版权

本文介绍如何使用Python高效地合并位于不同文件夹中的多个CSV文件。通过修改指定的文件夹路径和目标输出路径，即可实现批量合并操作。

摘要由CSDN通过智能技术生成

若A文件夹中有BCDEF五个文件夹，五个文件夹中各有一些csv文件，如果我们要合并这五个文件夹中的csv文件中的数据，可以使用此代码。

大家只需要修改好A文件的地址和合并结果的地址就可以使用了

import pandas as pd
import glob
import os

def merge_csv(all_xlsx):
    result_xlsx = pd.concat(all_xlsx)
    result_xlsx.to_csv(result_csv_path,index=0,sep=',',encoding="utf-8")
    #根据需求填写需要保存的encoding
    
            
if __name__ == '__main__':
    path=r'C:\Users\A #需要合并的A文件夹路径
    file_list=os.listdir(path)
    path2=[]
    for i in file_list:
        path2.append(i+r'\*.csv')
    all_path=[]
    for i in path2:
        all_path.append(os.path.join(path,i))
    csv_list=[]
    result_csv_path = r'C:\Users\123\Desktop\all.csv'#输出合并结果的地址和文件名
    for i in all_path:
        csv_list.append(glob.glob(i)[0])#获取所有子文件夹中的csv路径，若有空文件夹，会报错。
        
    number=0
    all_csv=[]
    for i in csv_list:
        tem_csv