SHELL基本的文本处理命令（二）

一、sed命令

sed：stream editor :一次处理一行内容，处理时，把当前的行存储在临时缓冲区，处理完后，输送到屏幕

sed [参数] '命令' file
    p    ##显示
    d    ##删除
    a    ##添加
    c    ##替换
    i    ##插入

1.p：显示

sed -n '/\:/p' /etc/fstab
sed -n '/^#/p' /etc/fstab
sed -n '/^#/!p' /etc/fstab
sed -n '2,6p' /etc/fstab
sed -n '2,6!p' /etc/fstab

2.d：删除

sed '/^UUID/d' /etc/fstab
sed '/^#/d' /etc/fstab
sed '/^$/d' /etc/fstab
sed '1,4d' /etc/fstab

3.a：添加

sed '/hello/aworld' westos
sed 's/hello/hello world/g' westos
sed 's/hello/hello\nworld/g' westos

4.c：替换

sed '/hello/chello world' westos

5.i：插入

[root@server mnt]# sed '/hello/iworld\nwestos' westos
world
westos
hello

6.-i：改变原文件内容

sed -i 's/westos/redhat/' passwd
sed -i 's/westos/redhat/g' passwd    ##全局替换 也可以这样修改  sed 's/\//#/g' /etc/fstab

二、awk报告生成器

1.awk处理机制：根据模式一次从文件中抽取一行文本，对这行文本进行切片（默认使用空白字符作为分隔符）

[root@server mnt]# cat test
this  | is | a | file
 $1     $2  $3    $4

awk '{print $0}' test    ##$0表示输出一整行

awk '{print $1}' test

awk '{print $4}' test

awk '{print $1,$2}' test    ##显示两个字段

awk -F ":" '{print $1,$3}' /etc/passwd    ##指定分隔符

2.awk常用变量

awk '{print FILENAME,NR}' /etc/passwd    ##输出文件名，和当前操作的行号

awk -F: '{print NR,NF}' /etc/passwd    ##输出每次处理的行号，以及当前以":"为分隔符的字段个数

总结：awk '{print "第NR行"，"有NF列"}' /etc/passwd

3.BEGIN{}:读入第一行文本之前执行的语句，一般用来初始化操作
{}:逐行处理
END{}:处理完最后以行文本后执行，一般用来处理输出结果

awk 'BEGIN { a=34;print a+10 }'

awk -F: 'BEGIN{print "REDHAT"} {print NR;print } END {print "WESTOS"}' passwd         ##文件开头加REDHAT，末尾加WESTOS，打印行号和内容

awk -F: '/bash$/{print}' /etc/passwd    ##输出以bash结尾的

awk -F: 'NR==3 {print}' /etc/passwd

awk -F: 'NR % 2 == 0 {print}' /etc/passwd    ##偶数行

awk -F: 'NR >=3 && NR <=5 {print }' /etc/passwd

awk 'BEGIN{i=0}{i+=NF}END{print i}' linux.txt    ##统计文本总字段个数

4.if单分支语句

awk -F: 'BEGIN{i=0}{if($7~/bash$/){i++}}END{print i}' /etc/passwd    ##统计登录shell为bash的用户

5.if双分支

awk -F: 'BEGIN{i=0;j=0}{if($3<=500){i++}else{j++}}END{print i,j}' /etc/passwd    ##统计uid小于等于500和大于500的用户个

6.for循环

awk 'BEGIN{for(i=1;i<=5;i++){print i}}'