linux 文本文件切分

split命令用于将大文件拆分为多个小文件,可以基于文件大小(-b)或行数(-l)进行拆分。-d选项使输出文件以数字编号,-a指定位数。例如,-b20G将按每20GB创建新文件,-l100000则按每10万行拆分。wc-l命令可用于查询文件的总行数。
摘要由CSDN通过智能技术生成
  1. split命令可以将一个大文本文件切分成多个小文件

  2. split参数说明

    -b 表示文件以大小拆分
    -l 指定分割后文件的最大行数
    -d 表示文件后缀为数字编号
    -a 4 表示编号是 4 位数字

文件路径后面可以指定生成文件的前缀名:这里以mylog.log为例

按大小切分举例:

 split -b 20G /data/mylog.log  -d -a 3 mylog.log_

上述命令会将 mylog.log 文件按每20G生成一个文件,切割后类似如下(编号从0开始):
mylog.log_000 mylog.log_001 mylog.log_002 mylog.log_003 mylog.log_004… 最后一个文件不足20G则按实际容量来

按行数切分举例:

 split -l 100000 /root/test.txt -d -a 4 mylog.log_

上述命令会将文件每10万行生成一个新的文件,切分后如下:
mylog.log_0000 mylog.log_0001 mylog.log_0002 mylog.log_0003

延伸:查询文件总行数:

wc -l a.txt
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值