之前合并文件都是写一个好长的脚本,并且还会遇到各种格式问题,最近才发现linux有直接合并和拆分文件的命令,用起来不要太爽 以csv文件为例 拆分文件 #使用split命令将unique.csv文件拆分为单个500000行的文件到key目录下,并命令文件的前缀为uniq_ split -500000 /root/unique.csv /root/key/uniq_ 合并文件 #将当前目录下所有的csv文件合并为full.csv文件 cat *.csv > full.csv