Python怎样用Pandas遍历目标文件夹下所有后缀，格式相同的表格数据并按指定条件筛选汇总到一个新的表格

最新推荐文章于 2024-03-26 16:01:52 发布
最新推荐文章于 2024-03-26 16:01:52 发布
阅读量1k 收藏 4
点赞数 2
分类专栏： 批量表格数据处理 文章标签： python 大数据 pycharm
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_43129188/article/details/106368367
版权

本人是初入Python界的小白，可以说是白中白。因工作需要，批量对数据处理，Get到Python这项小技能格外重要。因避免涉及公司和个人隐私，故举个与本人无关的工作示例和代码，供大家参考，希望大家能交流互相学习。这是我第一篇CSDN博客。学习Python的大佬们都知道有2句非常有名的话语，1中1英。以后我的博客都会出现这2句话，以‘英’开始，以‘中’结束。

Talk is cheap,please show your code.
However,为了让大家更简单易懂代码结构和运行，还是上几张图解释一下。
1.目标目录下的表格文件（.xlsx）
在这里插入图片描述
2.随便打开一个表格看一下：(所有表格的格式是一致的）
在这里插入图片描述
3.目的：把目标文件夹下的所有.xlsx文件中Customer中为‘B’客户的都提取出来，做客户一致性筛查处理，时间起始是2020-3-20到2020-4-5，我们看到表格中是没有文件客户是谁负责的信息，所以我们要把提取的文件的名称加到各自的筛选数据中。OK,let us Go!
Now,Beginning!
Talk is cheap,show me your code.好吧我刚说过了。

import pandas as pd
import os
import re
import openpyxl
from openpyxl import load_workbook
import time
#人机交互，信息收集，判断输入数据的准确与否，选择日期范围，需要筛选的客户，可自行设置
start_date = input('请输入日期起始点：(格式1978/4/1)\n')
end_date = input('请输入日期终止点：(格式同上)\n')
if start_date > end_date:
    print('有误，请检查！')
    time.sleep(1)
    print('程序结束，请重新Running.')
else:
    Customer = input('请输入您要汇总的客户名称：(格式ABCD)\n')
    time.sleep(1)
    if Customer != 'A'and \
            Customer != 'B'and \
            Customer != 'C' and \
            Customer != 'D'and \
            Customer != 'E' and \
            Customer != 'F' and \
            Customer != 'G' and \
            Customer != 'H':
        print('有误，请检查！')
        time.sleep(1)
        print('程序结束，请重新Running.')
    else:
        print('信息获取完毕，数据正在提取\n')
        time.sleep(1)
        print('...\n......\n.........')
        #开始导入Timer，Running
        start = time.time()
        #读取路径到上层文件夹，因为要遍历该文件夹下所有的表格
        inpath = "C:/Users/Administrator/Desktop/Python/read/5"
        #输出目标路径
        outpath = "C:/Users/Administrator/Desktop/Python/write/5/客户一致性筛查.xlsx"
        #后缀定义
        suffix = '.xlsx'
        #核心代码
        file_list = os.listdir(inpath)
        print('在目标路径' + inpath + '\n找到后缀为' + suffix + '的文件:\n'+ str(file_list))
        #定义数据框
        df_raw= pd.DataFrame()
        for file in file_list:
            if file.endswith(suffix):
                path = os.path.join(inpath,file)
                #正则提取文件名称
                order_name = re.findall(r"(.+?)\.",file)
                #读取表格数据
                df0 = pd.read_excel(path)
                #日期筛选及客户筛选
                df0['Date'] = df0['Date'].apply(pd.to_datetime,format='%Y-%m-%d')#具体时间：%H:%S:%f
                df00 = df0.loc[(df0['Date'] >= start_date) & (df0['Date'] <= end_date) & (df0['Customer'] == Customer)]
                length = len(df00)
                order_name_col = order_name * length
                #加销售人员的名字
                df00.insert(1,"From",order_name_col)
                #拼接数据
                df_raw = pd.concat([df_raw,df00],axis=0,sort=False)
                print(df_raw)
        df_raw.to_excel(outpath)
        #停止计时
        end = time.time()
        print('本次任务用时'+str(round(end-start,3))+'s')
        print('输出文件位置:\n'+outpath)

4.可以来看看运行过程：
在这里插入图片描述

C:\Users\Administrator\PycharmProjects\untitled\venv\Scripts\python.exe C:/Users/Administrator/PycharmProjects/untitled/CustomerTotal.py
请输入日期起始点：(格式1978/4/1)
2020/3/20
请输入日期终止点：(格式同上)
2020/4/5
请输入您要汇总的客户名称：(格式ABCD)
B
信息获取完毕，数据正在提取

...
......
.........
在目标路径C:/Users/Administrator/Desktop/Python/read/5
找到后缀为.xlsx的文件:
['Arry.xlsx', 'Bob.xlsx', 'Cathy.xlsx', 'Diavd.xlsx', 'Jessia.xlsx', 'John.xlsx', 'Lily.xlsx', 'Michcal.xlsx', 'Oliver.xlsx', 'Rebbita.xlsx', 'Sabria.xlsx']
         Date  From Customer Address Requirment     Contact
10 2020-03-22  Arry        B      上海      2层阳光板  1864567343
13 2020-03-25  Arry        B      上海      4层阳关板  1864567346
18 2020-03-30  Arry        B      上海        阳光板  1874567342
24 2020-04-05  Arry        B      上海        阳光板  1834567341
         Date  From Customer Address Requirment     Contact
10 2020-03-22  Arry        B      上海      2层阳光板  1864567343
13 2020-03-25  Arry        B      上海      4层阳关板  1864567346
18 2020-03-30  Arry        B      上海        阳光板  1874567342
24 2020-04-05  Arry        B      上海        阳光板  1834567341
10 2020-03-22   Bob        B      上海      2层阳光板  1864567343
13 2020-03-25   Bob        B      上海      4层阳关板  1864567346
18 2020-03-30   Bob        B      上海        阳光板  1874567342
24 2020-04-05   Bob        B      上海        阳光板  1834567341
         Date   From Customer Address Requirment     Contact
10 2020-03-22   Arry        B      上海      2层阳光板  1864567343
13 2020-03-25   Arry        B      上海      4层阳关板  1864567346
18 2020-03-30   Arry        B      上海        阳光板  1874567342
24 2020-04-05   Arry        B      上海        阳光板  1834567341
10 2020-03-22    Bob        B      上海      2层阳光板  1864567343
13 2020-03-25    Bob        B      上海      4层阳关板  1864567346
18 2020-03-30    Bob        B      上海        阳光板  1874567342
24 2020-04-05    Bob        B      上海        阳光板  1834567341
10 2020-03-22  Cathy        B      上海      2层阳光板  1864567343
13 2020-03-25  Cathy        B      上海      4层阳关板  1864567346
18 2020-03-30  Cathy        B      上海        阳光板  1874567342
24 2020-04-05  Cathy        B      上海        阳光板  1834567341
         Date   From Customer Address Requirment     Contact
10 2020-03-22   Arry        B      上海      2层阳光板  1864567343
13 2020-03-25   Arry        B      上海      4层阳关板  1864567346
18 2020-03-30   Arry        B      上海        阳光板  1874567342
24 2020-04-05   Arry        B      上海        阳光板  1834567341
10 2020-03-22    Bob        B      上海      2层阳光板  1864567343
13 2020-03-25    Bob        B      上海      4层阳关板  1864567346
18 2020-03-30    Bob        B      上海        阳光板  1874567342
24 2020-04-05    Bob        B      上海        阳光板  1834567341
10 2020-03-22  Cathy        B      上海      2层阳光板  1864567343
13 2020-03-25  Cathy        B      上海      4层阳关板  1864567346
18 2020-03-30  Cathy        B      上海        阳光板  1874567342
24 2020-04-05  Cathy        B      上海        阳光板  1834567341
10 2020-03-22  Diavd        B      上海      2层阳光板  1864567343
13 2020-03-25  Diavd        B      上海      4层阳关板  1864567346
18 2020-03-30  Diavd        B      上海        阳光板  1874567342
24 2020-04-05  Diavd        B      上海        阳光板  1834567341
         Date    From Customer Address Requirment     Contact
10 2020-03-22    Arry        B      上海      2层阳光板  1864567343
13 2020-03-25    Arry        B      上海      4层阳关板  1864567346
18 2020-03-30    Arry        B      上海        阳光板  1874567342
24 2020-04-05    Arry        B      上海        阳光板  1834567341
10 2020-03-22     Bob        B      上海      2层阳光板  1864567343
13 2020-03-25     Bob        B      上海      4层阳关板  1864567346
18 2020-03-30     Bob        B      上海        阳光板  1874567342
24 2020-04-05     Bob        B      上海        阳光板  1834567341
10 2020-03-22   Cathy        B      上海      2层阳光板  1864567343
13 2020-03-25   Cathy        B      上海      4层阳关板  1864567346
18 2020-03-30   Cathy        B      上海        阳光板  1874567342
24 2020-04-05   Cathy        B      上海        阳光板  1834567341
10 2020-03-22   Diavd        B      上海      2层阳光板  1864567343
13 2020-03-25   Diavd        B      上海      4层阳关板  1864567346
18 2020-03-30   Diavd        B      上海        阳光板  1874567342
24 2020-04-05   Diavd        B      上海        阳光板  1834567341
10 2020-03-22  Jessia        B      上海      2层阳光板  1864567343
13 2020-03-25  Jessia        B      上海      4层阳关板  1864567346
18 2020-03-30  Jessia        B      上海        阳光板  1874567342
24 2020-04-05  Jessia        B      上海        阳光板  1834567341
         Date    From Customer Address Requirment     Contact
10 2020-03-22    Arry        B      上海      2层阳光板  1864567343
13 2020-03-25    Arry        B      上海      4层阳关板  1864567346
18 2020-03-30    Arry        B      上海        阳光板  1874567342
24 2020-04-05    Arry        B      上海        阳光板  1834567341
10 2020-03-22     Bob        B      上海      2层阳光板  1864567343
13 2020-03-25     Bob        B      上海      4层阳关板  1864567346
18 2020-03-30     Bob        B      上海        阳光板  1874567342
24 2020-04-05     Bob        B      上海        阳光板  1834567341
10 2020-03-22   Cathy        B      上海      2层阳光板  1864567343
13 2020-03-25   Cathy        B      上海      4层阳关板  1864567346
18 2020-03-30   Cathy        B      上海        阳光板  1874567342
24 2020-04-05   Cathy        B      上海        阳光板  1834567341
10 2020-03-22   Diavd        B      上海      2层阳光板  1864567343
13 2020-03-25   Diavd        B      上海      4层阳关板  1864567346
18 2020-03-30   Diavd        B      上海        阳光板  1874567342
24 2020-04-05   Diavd        B      上海        阳光板  1834567341
10 2020-03-22  Jessia        B      上海      2层阳光板  1864567343
13 2020-03-25  Jessia        B      上海      4层阳关板  1864567346
18 2020-03-30  Jessia        B      上海        阳光板  1874567342
24 2020-04-05  Jessia        B      上海        阳光板  1834567341
10 2020-03-22    John        B      上海      2层阳光板  1864567343
13 2020-03-25    John        B      上海      4层阳关板  1864567346
18 2020-03-30    John        B      上海        阳光板  1874567342
24 2020-04-05    John        B      上海        阳光板  1834567341
         Date    From Customer Address Requirment     Contact
10 2020-03-22    Arry        B      上海      2层阳光板  1864567343
13 2020-03-25    Arry        B      上海      4层阳关板  1864567346
18 2020-03-30    Arry        B      上海        阳光板  1874567342
24 2020-04-05    Arry        B      上海        阳光板  1834567341
10 2020-03-22     Bob        B      上海      2层阳光板  1864567343
13 2020-03-25     Bob        B      上海      4层阳关板  1864567346
18 2020-03-30     Bob        B      上海        阳光板  1874567342
24 2020-04-05     Bob        B      上海        阳光板  1834567341
10 2020-03-22   Cathy        B      上海      2层阳光板  1864567343
13 2020-03-25   Cathy        B      上海      4层阳关板  1864567346
18 2020-03-30   Cathy        B      上海        阳光板  1874567342
24 2020-04-05   Cathy        B      上海        阳光板  1834567341
10 2020-03-22   Diavd        B      上海      2层阳光板  1864567343
13 2020-03-25   Diavd        B      上海      4层阳关板  1864567346
18 2020-03-30   Diavd        B      上海        阳光板  1874567342
24 2020-04-05   Diavd        B      上海        阳光板  1834567341
10 2020-03-22  Jessia        B      上海      2层阳光板  1864567343
13 2020-03-25  Jessia        B      上海      4层阳关板  1864567346
18 2020-03-30  Jessia        B      上海        阳光板  1874567342
24 2020-04-05  Jessia        B      上海        阳光板  1834567341
10 2020-03-22    John        B      上海      2层阳光板  1864567343
13 2020-03-25    John        B      上海      4层阳关板  1864567346
18 2020-03-30    John        B      上海        阳光板  1874567342
24 2020-04-05    John        B      上海        阳光板  1834567341
10 2020-03-22    Lily        B      上海      2层阳光板  1864567343
13 2020-03-25    Lily        B      上海      4层阳关板  1864567346
18 2020-03-30    Lily        B      上海        阳光板  1874567342
24 2020-04-05    Lily        B      上海        阳光板  1834567341
         Date     From Customer Address Requirment     Contact
10 2020-03-22     Arry        B      上海      2层阳光板  1864567343
13 2020-03-25     Arry        B      上海      4层阳关板  1864567346
18 2020-03-30     Arry        B      上海        阳光板  1874567342
24 2020-04-05     Arry        B      上海        阳光板  1834567341
10 2020-03-22      Bob        B      上海      2层阳光板  1864567343
13 2020-03-25      Bob        B      上海      4层阳关板  1864567346
18 2020-03-30      Bob        B      上海        阳光板  1874567342
24 2020-04-05      Bob        B      上海        阳光板  1834567341
10 2020-03-22    Cathy        B      上海      2层阳光板  1864567343
13 2020-03-25    Cathy        B      上海      4层阳关板  1864567346
18 2020-03-30    Cathy        B      上海        阳光板  1874567342
24 2020-04-05    Cathy        B      上海        阳光板  1834567341
10 2020-03-22    Diavd        B      上海      2层阳光板  1864567343
13 2020-03-25    Diavd        B      上海      4层阳关板  1864567346
18 2020-03-30    Diavd        B      上海        阳光板  1874567342
24 2020-04-05    Diavd        B      上海        阳光板  1834567341
10 2020-03-22   Jessia        B      上海      2层阳光板  1864567343
13 2020-03-25   Jessia        B      上海      4层阳关板  1864567346
18 2020-03-30   Jessia        B      上海        阳光板  1874567342
24 2020-04-05   Jessia        B      上海        阳光板  1834567341
10 2020-03-22     John        B      上海      2层阳光板  1864567343
13 2020-03-25     John        B      上海      4层阳关板  1864567346
18 2020-03-30     John        B      上海        阳光板  1874567342
24 2020-04-05     John        B      上海        阳光板  1834567341
10 2020-03-22     Lily        B      上海      2层阳光板  1864567343
13 2020-03-25     Lily        B      上海      4层阳关板  1864567346
18 2020-03-30     Lily        B      上海        阳光板  1874567342
24 2020-04-05     Lily        B      上海        阳光板  1834567341
10 2020-03-22  Michcal        B      上海      2层阳光板  1864567343
13 2020-03-25  Michcal        B      上海      4层阳关板  1864567346
18 2020-03-30  Michcal        B      上海        阳光板  1874567342
24 2020-04-05  Michcal        B      上海        阳光板  1834567341
         Date     From Customer Address Requirment     Contact
10 2020-03-22     Arry        B      上海      2层阳光板  1864567343
13 2020-03-25     Arry        B      上海      4层阳关板  1864567346
18 2020-03-30     Arry        B      上海        阳光板  1874567342
24 2020-04-05     Arry        B      上海        阳光板  1834567341
10 2020-03-22      Bob        B      上海      2层阳光板  1864567343
13 2020-03-25      Bob        B      上海      4层阳关板  1864567346
18 2020-03-30      Bob        B      上海        阳光板  1874567342
24 2020-04-05      Bob        B      上海        阳光板  1834567341
10 2020-03-22    Cathy        B      上海      2层阳光板  1864567343
13 2020-03-25    Cathy        B      上海      4层阳关板  1864567346
18 2020-03-30    Cathy        B      上海        阳光板  1874567342
24 2020-04-05    Cathy        B      上海        阳光板  1834567341
10 2020-03-22    Diavd        B      上海      2层阳光板  1864567343
13 2020-03-25    Diavd        B      上海      4层阳关板  1864567346
18 2020-03-30    Diavd        B      上海        阳光板  1874567342
24 2020-04-05    Diavd        B      上海        阳光板  1834567341
10 2020-03-22   Jessia        B      上海      2层阳光板  1864567343
13 2020-03-25   Jessia        B      上海      4层阳关板  1864567346
18 2020-03-30   Jessia        B      上海        阳光板  1874567342
24 2020-04-05   Jessia        B      上海        阳光板  1834567341
10 2020-03-22     John        B      上海      2层阳光板  1864567343
13 2020-03-25     John        B      上海      4层阳关板  1864567346
18 2020-03-30     John        B      上海        阳光板  1874567342
24 2020-04-05     John        B      上海        阳光板  1834567341
10 2020-03-22     Lily        B      上海      2层阳光板  1864567343
13 2020-03-25     Lily        B      上海      4层阳关板  1864567346
18 2020-03-30     Lily        B      上海        阳光板  1874567342
24 2020-04-05     Lily        B      上海        阳光板  1834567341
10 2020-03-22  Michcal        B      上海      2层阳光板  1864567343
13 2020-03-25  Michcal        B      上海      4层阳关板  1864567346
18 2020-03-30  Michcal        B      上海        阳光板  1874567342
24 2020-04-05  Michcal        B      上海        阳光板  1834567341
10 2020-03-22   Oliver        B      上海      2层阳光板  1864567343
13 2020-03-25   Oliver        B      上海      4层阳关板  1864567346
18 2020-03-30   Oliver        B      上海        阳光板  1874567342
24 2020-04-05   Oliver        B      上海        阳光板  1834567341
         Date     From Customer Address Requirment     Contact
10 2020-03-22     Arry        B      上海      2层阳光板  1864567343
13 2020-03-25     Arry        B      上海      4层阳关板  1864567346
18 2020-03-30     Arry        B      上海        阳光板  1874567342
24 2020-04-05     Arry        B      上海        阳光板  1834567341
10 2020-03-22      Bob        B      上海      2层阳光板  1864567343
13 2020-03-25      Bob        B      上海      4层阳关板  1864567346
18 2020-03-30      Bob        B      上海        阳光板  1874567342
24 2020-04-05      Bob        B      上海        阳光板  1834567341
10 2020-03-22    Cathy        B      上海      2层阳光板  1864567343
13 2020-03-25    Cathy        B      上海      4层阳关板  1864567346
18 2020-03-30    Cathy        B      上海        阳光板  1874567342
24 2020-04-05    Cathy        B      上海        阳光板  1834567341
10 2020-03-22    Diavd        B      上海      2层阳光板  1864567343
13 2020-03-25    Diavd        B      上海      4层阳关板  1864567346
18 2020-03-30    Diavd        B      上海        阳光板  1874567342
24 2020-04-05    Diavd        B      上海        阳光板  1834567341
10 2020-03-22   Jessia        B      上海      2层阳光板  1864567343
13 2020-03-25   Jessia        B      上海      4层阳关板  1864567346
18 2020-03-30   Jessia        B      上海        阳光板  1874567342
24 2020-04-05   Jessia        B      上海        阳光板  1834567341
10 2020-03-22     John        B      上海      2层阳光板  1864567343
13 2020-03-25     John        B      上海      4层阳关板  1864567346
18 2020-03-30     John        B      上海        阳光板  1874567342
24 2020-04-05     John        B      上海        阳光板  1834567341
10 2020-03-22     Lily        B      上海      2层阳光板  1864567343
13 2020-03-25     Lily        B      上海      4层阳关板  1864567346
18 2020-03-30     Lily        B      上海        阳光板  1874567342
24 2020-04-05     Lily        B      上海        阳光板  1834567341
10 2020-03-22  Michcal        B      上海      2层阳光板  1864567343
13 2020-03-25  Michcal        B      上海      4层阳关板  1864567346
18 2020-03-30  Michcal        B      上海        阳光板  1874567342
24 2020-04-05  Michcal        B      上海        阳光板  1834567341
10 2020-03-22   Oliver        B      上海      2层阳光板  1864567343
13 2020-03-25   Oliver        B      上海      4层阳关板  1864567346
18 2020-03-30   Oliver        B      上海        阳光板  1874567342
24 2020-04-05   Oliver        B      上海        阳光板  1834567341
10 2020-03-22  Rebbita        B      上海      2层阳光板  1864567343
13 2020-03-25  Rebbita        B      上海      4层阳关板  1864567346
18 2020-03-30  Rebbita        B      上海        阳光板  1874567342
24 2020-04-05  Rebbita        B      上海        阳光板  1834567341
         Date     From Customer Address Requirment     Contact
10 2020-03-22     Arry        B      上海      2层阳光板  1864567343
13 2020-03-25     Arry        B      上海      4层阳关板  1864567346
18 2020-03-30     Arry        B      上海        阳光板  1874567342
24 2020-04-05     Arry        B      上海        阳光板  1834567341
10 2020-03-22      Bob        B      上海      2层阳光板  1864567343
13 2020-03-25      Bob        B      上海      4层阳关板  1864567346
18 2020-03-30      Bob        B      上海        阳光板  1874567342
24 2020-04-05      Bob        B      上海        阳光板  1834567341
10 2020-03-22    Cathy        B      上海      2层阳光板  1864567343
13 2020-03-25    Cathy        B      上海      4层阳关板  1864567346
18 2020-03-30    Cathy        B      上海        阳光板  1874567342
24 2020-04-05    Cathy        B      上海        阳光板  1834567341
10 2020-03-22    Diavd        B      上海      2层阳光板  1864567343
13 2020-03-25    Diavd        B      上海      4层阳关板  1864567346
18 2020-03-30    Diavd        B      上海        阳光板  1874567342
24 2020-04-05    Diavd        B      上海        阳光板  1834567341
10 2020-03-22   Jessia        B      上海      2层阳光板  1864567343
13 2020-03-25   Jessia        B      上海      4层阳关板  1864567346
18 2020-03-30   Jessia        B      上海        阳光板  1874567342
24 2020-04-05   Jessia        B      上海        阳光板  1834567341
10 2020-03-22     John        B      上海      2层阳光板  1864567343
13 2020-03-25     John        B      上海      4层阳关板  1864567346
18 2020-03-30     John        B      上海        阳光板  1874567342
24 2020-04-05     John        B      上海        阳光板  1834567341
10 2020-03-22     Lily        B      上海      2层阳光板  1864567343
13 2020-03-25     Lily        B      上海      4层阳关板  1864567346
18 2020-03-30     Lily        B      上海        阳光板  1874567342
24 2020-04-05     Lily        B      上海        阳光板  1834567341
10 2020-03-22  Michcal        B      上海      2层阳光板  1864567343
13 2020-03-25  Michcal        B      上海      4层阳关板  1864567346
18 2020-03-30  Michcal        B      上海        阳光板  1874567342
24 2020-04-05  Michcal        B      上海        阳光板  1834567341
10 2020-03-22   Oliver        B      上海      2层阳光板  1864567343
13 2020-03-25   Oliver        B      上海      4层阳关板  1864567346
18 2020-03-30   Oliver        B      上海        阳光板  1874567342
24 2020-04-05   Oliver        B      上海        阳光板  1834567341
10 2020-03-22  Rebbita        B      上海      2层阳光板  1864567343
13 2020-03-25  Rebbita        B      上海      4层阳关板  1864567346
18 2020-03-30  Rebbita        B      上海        阳光板  1874567342
24 2020-04-05  Rebbita        B      上海        阳光板  1834567341
10 2020-03-22   Sabria        B      上海      2层阳光板  1864567343
13 2020-03-25   Sabria        B      上海      4层阳关板  1864567346
18 2020-03-30   Sabria        B      上海        阳光板  1874567342
24 2020-04-05   Sabria        B      上海        阳光板  1834567341
本次任务用时0.867s
输出文件位置:
C:/Users/Administrator/Desktop/Python/write/5/客户一致性筛查.xlsx

Process finished with exit code 0

在这里插入图片描述
在这里插入图片描述
成功，Well Done! 只要0.867s!没有什么是比时间还珍贵。
But,还有一句中文没有说哦！好吧，太熟悉了，

人生苦短，我用Python！

ShowBrother
关注
专栏目录
python遍历文件夹下所有excel文件_读取某文件夹下所有excel文件 python
weixin_39723678的博客
11-28 3495
import osimport pandas as pdfrom sklearn import linear_modelpath = r'D:\新数据\每日收益率'filenames = os.listdir(path)for filename in filenames:print(filename)for i in filenames:excel_path = 'D:\新数据\每日收益率\\' ...
python 批量读取文件夹下的电子表格 汇总_Python-pandas批量读取同一文件夹下的所有.xlsx文件并提取指定列写入一张excel表...
weixin_39657575的博客
12-22 1787
工作需要将一批csv文件转为excel文件并进行数据计算处理，因为csv文件为；分割，并且转为excel文件后可能同一个名称的列不在同一列，比如同样是Paid Price名称的列，一个文件在AL列，两一个在AO列，如果单纯的读取所有文件并合并的话就会导致数据错列排放，在网上找了很多教程并没有现成的程序解决问题，所以就只能自己动手丰衣足食了。 每个.xlsx文件都是有csv转换过来的，详见上一篇文章...
Python-pandas批量读取同一文件夹下的所有.xlsx文件并提取指定列写入一张excel表
热门推荐
weixin_44606231的博客
04-21 2万+
工作需要将一批csv文件转为excel文件并进行数据计算处理，因为csv文件为；分割，并且转为excel文件后可能同一个名称的列不在同一列，比如同样是Paid Price名称的列，一个文件在AL列，两一个在AO列，如果单纯的读取所有文件并合并的话就会导致数据错列排放，在网上找了很多教程并没有现成的程序解决问题，所以就只能自己动手丰衣足食了。 每个.xlsx文件都是有csv转换过来的，详见上一...
读取指定文件夹下所有文件名
gghhm的博客
08-27 1619
读取指定文件夹下所有文件名 (1)、 import csv import os import pandas as pd #提取文件夹下的地址+文件名，源文件设定排序规则 def file_name(file_dir): L = [] for root, dirs, files in os.walk(file_dir): for file in files: ...
python 读取文件夹下所有文件
weixin_53704902的博客
11-04 100
python读取文件下所有文件。
python办公自动化-1 读取文件夹下的所有文件名
m0_58192074的博客
12-26 856
【代码】python办公自动化-1 读取文件夹下的所有文件名，包括子文件夹下的文件名。
Python对Excel按列值筛选并拆分表格到多个文件的代码
09-18
本文将详细介绍如何使用Python代码对Excel表格进行按列值筛选，并将筛选后的数据拆分存储到多个新的Excel文件中。这种操作在数据处理中非常常见，尤其当需要对大量数据进行分类汇总时，用代码自动化处理可以大幅提高...
RPA手把手：pandas 循环读取文件夹下的 excel，并汇总到一张表格
weixin_44447687的博客
08-13 3908
关注RPA请访问网站： www.i-search.com.cn 学Python,用RPA,欢迎下载使用 www.i-search.com.cn/index.html?from=line1 – coding:utf-8 –- “”" 利用 pandas 将多张 excel 表中的指定列数据合并成一张；因为原始的多张数据存在同样列名的数据， 因为原始多张 excel 是从 csv 文件转换股 并且我们只需要其中的部分列数据，所以进行指定列提取并汇总至 res 文件中 “”" import os import p
pandas 第一行_pandas 循环读取文件夹下的 excel，并汇总到一张表格
weixin_39816024的博客
11-20 1054
-- coding:utf-8 –-"""利用 pandas 将多张 excel 表中的指定列数据合并成一张；因为原始的多张数据存在同样列名的数据，因为原始多张 excel 是从 csv 文件转换股并且我们只需要其中的部分列数据，所以进行指定列提取并汇总至 res 文件中"""import osimport pandas as pd输入参数为 excel 表格所在目录def to_one_exce...
基于Python的一个自动录入表格的小程序
09-16
1. **信息收集**：利用`os`库遍历指定的QQ接收文件夹（如`D://qq//qq文档//qq//FileRecv//`），找出所有TXT文件，并使用`shutil`库将它们复制到一个统一的处理目录，同时删除原始QQ接收目录中的文件，以保持整洁。...
导入Python的依赖openpyxl，xlrd，解决execl按某列条件，修改另一列的值.py
02-12
让xlrd模块，进行行列数据获取，从而获取数组索引 再利用数组索引，进行用xlrd模块读取某单元格的数据，进行判断 用openpyxl，进行根据索引单元格，直接赋值 最后，直接save这个文件，就可以了 导入Python的依赖openpyxl，xlrd，解决execl按某列条件，修改另一列的值.py
浅谈pandas筛选出表中满足另一个表所有条件的数据方法
09-19
今天小编就为大家分享一篇浅谈pandas筛选出表中满足另一个表所有条件的数据方法，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
python统计所有相同后缀的文件个数
04-25
代码使用三种方法统计指定路径下某类型文件的个数，可用于文件复制，批量处理文件
python读取文件名称生成list_python读取文件名称生成list的方法
weixin_36312603的博客
02-21 359
经常需要读取某个文件夹下所有的图像文件。我使用python写了个简单的代码，读取某个文件夹下某个后缀的文件，将文件名生成为文本(csv格式)import fnmatchimport osimport pandas as pdimport numpy as npimport sysInputStra = sys.argv[1]InputStrb = sys.argv[2]def ReadSaveAd...
Python读取Excel文件汇总数据后写入新的Excel示例
大宇进阶之路的博客
12-28 2769
工作中遇到一些场景，需要做Excel重复性工作可以使用Python读取Excel文档，读取处理数据后生成新的Excel文件保存。 以我自己实际场景中的一个小需求为例，供大家参考： 需求：有两个站点数据，是每一个code和产品型号对应的数量，需要把这两个表格汇总为一张表格统计显示。 源数据： 统计后的数据： 直接贴上我的代码： import xlrd import os import pandas as pd def process_union(filename,new_file)..
【python写一段代码完成文件夹内多种类型文件名的读取，输出为一个excel表格】
最新发布
qq_36253366的博客
03-26 392
方法会读取整个文件到内存中，因此如果你的文件非常大，这可能会消耗大量内存。对于大文件，你可能希望逐行读取文件，以避免内存问题。运行代码后，它会在你指定的文件夹中遍历所有文件，并将文件名和扩展名保存到Excel文件中。突发奇想，利用python写一段代码完成文件夹内多种类型文件名的读取，输出为一个excel表格。，它会逐行迭代文件的内容，而不需要一次性读取整个文件。方法读取文件中的所有行，并将它们作为字符串列表返回。方法来读取文件中的所有行。在Python中，你可以使用内置的。函数来打开文件，并使用文件的。
pandas 批量读取文件
Sunny_zrm的博客
09-16 2918
前提是批量读取的这些文件都是相同的格式，才能在最后使用pd.concat()函数拼接为一个总表 # 导入pandas模块 import pandas as pd # TODO 导入os模块 import os # TODO 将文件夹路径"/Users/azhen"赋值给变量path path = "/Users/azhen" # TODO 使用os.listdir()函数获取该路径下所有的文件名称组成的列表，并赋值给变量filelist filelist = os.listdir(path) # T
python将循环遍历的数追加到列表
xzm961226xzm的博客
10-05 1万+
list11=[] for i in range(len(train_dataset)): #print(train_dataset[i]) #y_train= train_dataset[i] list11.append(train_dataset[i]) #sio.savemat('train.mat',{'y_train':y_train}) #print(list11) xx1_train=np.array(list11) print(xx1_train.sha.
Python 将文件夹中的图片按一定数量分组批量复制到新的文件夹
wj1298250240的博客
11-02 2174
Python 将文件夹中的图片按一定数量分组批量复制到新的文件夹 为应对，百度网盘每次上传文件不能超过300个，小文件，可用此程序实现分组 #!/usr/bin/env python # encoding: utf-8 import os, glob from shutil import copy def copyFile(file_path, save_dir, count, dir_name): #i是用来计算文件的数量，k是用来计算新建文件夹的数量 i = 0
请输入以下代码：利用python遍历文件夹下所有excel，并根据‘代码’这一列将同一行的数字保存到新的excel
09-19
### 回答1： 以下是可以用 Python 遍历文件夹下所有 Excel 并根据“代码”这一列将同一行的数字保存到新的 Excel 的代码： ```python import os import pandas as pd # 定义要遍历的文件夹路径 folder_path = 'your_folder_path' # 定义要保存的新 Excel 文件路径 new_excel_path = 'your_new_excel_path' # 定义要遍历的文件后缀名 file_extension = '.xlsx' # 定义要筛选的列名 column_name = '代码' # 定义要保存的列名 save_column_name = '数字' # 获取文件夹下所有符合条件的文件路径 file_paths = [os.path.join(folder_path, f) for f in os.listdir(folder_path) if f.endswith(file_extension)] # 遍历所有文件并读取数据 data = [] for file_path in file_paths: df = pd.read_excel(file_path) data.append(df) # 合并所有数据 merged_data = pd.concat(data) # 筛选出符合条件的行并保存到新 Excel 文件 new_data = merged_data.loc[:, [column_name, save_column_name]] new_data.to_excel(new_excel_path, index=False) ``` 注意：在运行代码前需要先安装 pandas 库。 ### 回答2： 可以使用Python的pandas库和os库来实现遍历文件夹下所有Excel文件，并根据指定列的值将同一行的数字保存到新的Excel文件中。具体代码如下： ```python import os import pandas as pd # 定义文件夹路径 folder_path = "文件夹路径" # 定义保存结果的新Excel文件路径 result_file = "保存结果的新文件路径.xlsx" # 遍历文件夹下的所有文件 files = os.listdir(folder_path) # 初始化一个空的DataFrame用来保存结果 result_df = pd.DataFrame() # 遍历每个文件 for file in files: file_path = os.path.join(folder_path, file) # 判断文件是否为Excel文件 if file_path.endswith(".xlsx") or file_path.endswith(".xls"): # 读取Excel文件的内容 df = pd.read_excel(file_path) # 根据‘代码’这一列将同一行的数字保存到结果中 result_df = pd.concat([result_df, df['代码']], axis=1) # 仅保存‘代码’所在的列 # 将结果保存到新的Excel文件中 result_df.to_excel(result_file, index=False) ``` 请将"文件夹路径"替换为要遍历的文件夹路径，将"保存结果的新文件路径.xlsx"替换为保存结果的新Excel文件路径。 该代码可以遍历指定文件夹下的所有Excel文件，将每个Excel文件中指定列的值保存到结果中，并将结果保存到新的Excel文件中。 ### 回答3： 可以使用Python中的os和pandas库来实现遍历文件夹下所有的Excel文件，并根据某一列的值保存同一行的数字到新的Excel文件。 首先需要导入所需的库： ```python import os import pandas as pd ``` 然后定义一个函数来遍历文件夹下的所有Excel文件并保存所有数字到新的Excel文件中： ```python def find_excel_files(folder_path): # 创建一个空的DataFrame，用于保存所有数字 all_numbers = pd.DataFrame() # 遍历文件夹下的所有文件和子文件夹 for root, dirs, files in os.walk(folder_path): for file in files: # 检查文件的扩展名是否为Excel文件 if file.endswith(".xlsx") or file.endswith(".xls"): file_path = os.path.join(root, file) # 读取Excel文件的内容 excel_data = pd.read_excel(file_path) # 提取‘代码’这一列的值，并保存到新的DataFrame中 numbers = excel_data['代码'].values all_numbers = all_numbers.append(pd.DataFrame(numbers), ignore_index=True) # 将保存的所有数字保存到新的Excel文件中 all_numbers.to_excel("输出文件.xlsx", index=False) ``` 最后，调用这个函数并传入文件夹的路径来执行遍历和保存操作： ```python folder_path = "/文件夹路径" find_excel_files(folder_path) ``` 其中，`/文件夹路径`需要替换成实际的文件夹路径。 执行完代码后，会在当前目录下生成一个名为"输出文件.xlsx"的Excel文件，其中包含了所有Excel文件中‘代码’这一列的数字。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值