wc 统计行数
wc -l test.txt
查看某些行
head -100 filename
tail -100 filename 或 tail -n 100 filename
# 看中间100-200行的内容
sed -n '100,200p' filename
awk
# 注意:把指令包含在 ‘{}’ 之中
# -F 指定 分隔符
awk -F "," '{print $1 $5 $6 $7 $8 $20 $23}' > xaa.txt
awk '{if(length($2)==20&&(length($6)!=2||length($7)!=2)) print}' xaa.txt > xaa.pe
sed
# -e 可以在一条语句里面使用多组命令
# s/ /,/g 中,
# 第一个s表示替换
# 把空格替换成逗号
# 最后的g表示全局替换
sed -e "s/ /,/g" -e "s/-//g" tt.txt > tt.csv
split切割文本
# 按照行切割文本
split -l 1000000 1111.log
cat 合并文件
cat aa.log bb.log cc.log > all.log