代码记录-python-工作文件汇总加载（csv/excel）

"""常用工具库引入"""

import numpy as np
import pandas as pd
import os
import time
import datetime
data_work = 'C:\\Users\\0\\Desktop\\data_work'    #文件存放地址
os.chdir(data_work)



"""代码主体，用于加载多文件数据源（事实表）"""

start = time.perf_counter()
df_list = []

for root, dirs, files in os.walk(data_work):
    for file in files:
        root_file = os.path.join(root,file)
        print("正在读取加载文件~~~")
        df = pd.read_csv(root_file,encoding = 'gbk')
#         df = pd.read_excel(root_file)
        print("文件读取完毕~~~")
        df_list.append(df)
    
df_list_con = pd.concat(df_list)    #用于下一步分析的数据源汇总结果
print(df_list_con.info())    #打印数据字段信息

end = time.perf_counter()
print(end-start)    #输出加载用时
print("数据加载完毕")