python合并csv文件_PYTHON合并CSV文件的实践

最近尝试使用PYTHON处理CSV数据，由于CSV文件有好几个，需要提前拼接，然后再处理，因此遇到了PYTHON对文件进行合并的问题。此次尝试了两种方法：一是调用CMD命令处理；二是使用PYTHON写程序处理，经过尝试，觉得第一种方法简单实用。假设文件夹下面有N个CSV文件，要将这些文件都汇总到data.csv，下面使用上述两种方式实现：

一、调用CMD命令合并文件

command=”type %s >>%s” % (filename,newFileName)

os.system(command)

DOS命令TYPE的作用是将文件内容显示出来，跟LINUX相似，可以重定向但文本中，因此可以遍历该目录下面所有的CSV文件，生成DOS命令，然后执行，就能够将多个CSV文件合并到一个文件里面。类似下面多个命令：

TYPE one.csv >>data.csv

TYPE two.csv >>data.csv

TYPE three.csv >>data.csv

…

使用该方法的特点是比较简单，直接调用DOS命令就能够将文件合并了，并不用打开文件读取文件内容，再写入到新的文件。

二、使用PYTHON程序合并文件

这种方面是读取CSV文件的每一行，然后追加到目标文件里面，这里使用with open语句打开。遍历这个文件夹下的所有.csv文件，然后逐个打开，一行一行追加到新文件中。

with open(item,”r”) as src,open(newFile,”a”) as des:

for line in src:

des.write(line)