python创建文件夹,读取目录下所有excel的文件并保存新的csv文件

1,pathe目录下,所有excel文件的名字,存储在fil_name的list中,且不考虑size最小的excel。

def findalldir(pathe):
    files= os.listdir(pathe)
    allsize = []
    fil_name=[]
    for i in files:
        file_path = os.path.join(pathe, i)
        if os.path.isdir(file_path): #不考虑文件夹下子文件的内容
            continue
        elif os.path.splitext(file_path)[1]=='.xls' or os.path.splitext(file_path)[1]=='.xlsx':
            filsize = os.path.getsize(file_path)
            fil_name.append(file_path)
            allsize.append(filsize) #所有xls文件大小
    minfilesize = allsize.index(min(allsize))# xls文件最小的位置
    fil_name.pop(minfilesize) #去掉xls文件最小的路径
    return fil_name

读取上述所有excel文件 ,如果excel中有多个sheet,则将每个sheet读出,并按照columns拼接excel

file_name = findalldir(pathe) 
dfda =  DataFrame()
for i in file_name:
    dfnum  = DataFrame()
    df = pd.read_excel(i,sheet_name=None,headers=0,skiprows = 4,encoding = 'utf8',sort = False )
    keyname = list(df.keys())
    for j in keyname:
        dfnum = pd.concat([dfnum,df[j]],axis=0)
    dfda = pd.concat([dfda,dfnum],axis=0)

将拼接的excel放置在新的csv文件中,并重新命名。

files= os.listdir(pathe)
pathr = files[0]
if  pathr.endswith('.xls')or pathr.endswith('.xlsx'): 
    fil = re.split(r'[#\s]\s*', pathr) #excel命名的名字以“#”为分割点
    fil = fil[0].replace('-','_')   #将新名字中"-"换为"_",方便后面读取

2,在目录下创建文件夹,如果有,则不创建,返回false,如果没有则创建,返回true。

def getnewfile(path):
    # 如果不存在则创建目录
    import os
    path=path.strip()
  # 去除尾部 \ 符号
    path=path.rstrip("\\")
    isExists=os.path.exists(path)
    if not isExists:
        os.makedirs(path)
        return True
    else:
        return False

函数调用如下。

pathmot = os.path.join(pathe, oripath)
getnewfile(pathmot)
pathsun = os.path.join(pathmot,fil)
getnewfile(pathsun)  #创建新子文件夹

3,创建新的csv文件,放置到新建的文件夹pathsun路径下,csv文件名字为fil。

dfda.to_csv(pathsun+'\\'+fil+'_'+str(k)+'.csv',header=True,index=False,encoding='gbk')

 

  • 1
    点赞
  • 10
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值