python合并不同文件夹相同文件名的文件

RS&

于 2024-04-23 19:15:54 发布

阅读量373

点赞数 1

分类专栏： # python 文章标签： python 开发语言

本文链接：https://blog.csdn.net/qq_32649321/article/details/138135940

版权

python 专栏收录该内容

154 篇文章 10 订阅

订阅专栏

要求：
合并来自不同文件夹下相同csv文件，如：
在这里插入图片描述
三个文件夹均含有1.csv，2.csv，3.csv等等文件，现在对文件进行合并。思路：先创建一个文件名list，然后遍历。
python代码：

data = pd.read_csv(r'filename_list.csv')
base_path  = r"folder_path"
save_path = r'save_path'
folders = ['2016','2017','2018']

for index, row in data.iterrows():
    fid = row['FID']
    print(fid)
    merged_df = pd.DataFrame()
    for folder in folders:
        folder_path = os.path.join(base_path, folder)
        file_path = os.path.join(folder_path,f'{fid}.csv')

        if os.path.exists(file_path):
            # print(file_path)
            data = pd.read_csv(file_path)
            merged_df = pd.concat([merged_df, data])
            if not merged_df.empty:
                merged_df.to_csv(os.path.join(save_path, f'{fid}.csv'), index=False)
print('done!')