pandas 转化np数据_用Python遍历文件夹下的所有文件并进行数据处理（Pathlib简介）...

在数据分析的日常工作中，我们可能会经常需要处理这样的问题：将一个或多个文件夹下的文件中的数据进行分析、处理、整合。这些文件通常是相似的或是同类别的，比如我们有多个月份的销售信息，每个月份的数据分别存在一个excel文档中；多个类别的销售信息，每个类的数据分别存在一个excel文档中等等。像是如图中所示：

在当前文件夹中存在“files”文件夹，里面是我们将要分析的数据，在该文件夹目录下又有如下四个文件夹，我们可以看作是四个大类的数据：

这四个文件夹当中就分别存放着所对应的数据，随便打开其中一个文件夹，数据文件如图所示：

其中每个文件的内容大致是相同：

所有文件共有128个，每个文件中条目数在几百行，我们需要分别对这些文件中的数据进行分析，求出每个文件中所属类目的起始日期、终止日期、平均转化率、平均客单价，然后汇总到一起输出一份数据分析报告。如果用excel来一个个处理的话需要处理128次，想想就觉得费力啊！那么这个时候用上我们的pandas就再合适不过了。这个时候有些朋友会有些疑惑，我们该如何遍历这些文件并读取数据呢？本文就通过os库以及pathlib库为大家讲解，并在最后重点介绍一下pathlib。

首先导入我们需要使用到的库：

import pandas as pdimport numpy as npimport osfrom pathlib import Pathimport time

设置自己存放文件的根目录：

file_path = "/Users/***/jupyter_notebook/Python_file_processing/files"

先用os的方法&