linux怎么随机按行打散文件,linux shell 将文件按照行数以及顺序拆分成多个文件...

awk -vf=3 -vl="`wc -l file`" 'BEGIN{p=int(l/f);q=(l%f);for(n=1;n<=f;n++)a[n]=n*p+((n<=q)?++x:x)}{if(NR>a[i])i++;print >"file"i}' file

这里的-vf=3 表示将file拆分成3个文件，另外还有一种解法，如下所示：

#!/bin/bash

if [ $# -ne 2 ];then

echo "U: sh $0 [file] [fnumber]"

echo "E: sh $0 myfile 3"

exit 1

fi

srcfile=$1 #原始文件

fnumber=$2 #需要拆分的文件个数

eval $(cat $srcfile | awk -vn=$fnumber 'END{print "total="NR,"fline="int(NR/n),"extra="NR%n,"cline="int(NR/n)+1}')

# total:原始文件总行数

# fline:拆分文件平均行数

# extra:需要扩展行数的文件个数

# cline:当前拆分文件行数

i=1

iline=1

while true;do

filename="file$i"

# 按行的顺序分别写入文件中

if [ $extra = 0 ];then

echo "$filename lines: $fline"

tail -n +$iline $srcfile | head -n $fline > $filename

iline=$((iline+fline))

else

echo "$filename lines: $cline"

tail -n +$iline $srcfile | head -n $cline > $filename

iline=$((iline+cline))

extra=$((extra-1))

fi

((i++))

[ $iline -ge $total ] && exit 0

done