Shell基础（sed，awk命令的使用）

sed

Linux sed命令是利用script来处理文本文件。
sed可依照script的指令，来处理、编辑文本文件。
Sed主要用来自动编辑一个或多个文件；简化对文件的反复操作；编写转换程序等。
#sed：stream editor :一次处理一行内容，处理时，把当前的行存储在临时缓冲区，处理完后，输送到屏幕，所以不会改变和损坏原文件内容
参数说明
-e

1）p：
sed -n '/\:/p' /etc/fstab      			显示含有：的行
sed -n '/^#/p' /etc/fstab				显示#开头的行
sed -n '/^#/!p' /etc/fstab			显示非#开头的行
sed -n '2,6p' /etc/fstab				显示2到6行
sed -n '2,6!p' /etc/fstab			显示除了2到6行
2）d：
sed '/^UUID/d' /etc/fstab 			删除UUID开头的行
sed '/^#/d' /etc/fstab 				删除#开头的行
sed '/^$/d' /etc/fstab 				删除$开头的行
sed '1,4d' /etc/fstab 					删除1到4行
3）a：
sed '/hello/aworld' westos		在原文本hello下一行添加world
sed 's/hello/hello world/g' westos		将hello替换为hello world
sed 's/hello/hello\nworld/g' westos		添加world在hello的下一行
4）c：替换
sed '/hello/chello world' westos		 将hello替换为hello world 
5）i：
[root@server mnt]# sed '/hello/iworld\nwestos' westos    在hello的上一行添加world再在world的下一行添加westos
world
westos
hello
sed 's/\//#/g' /etc/fstab       
6）-i：改变原文件内容
sed -i 's/westos/redhat/' passwd
sed -i 's/westos/redhat/g' passwd	##全局替换

练习：将http的80端口改为8080端口，或者改为自己想要的端口

#!/bin/bash

yum install -y httpd &> /dev/null
sed -i "/^Listen/cListen $1" /etc/httpd/conf/httpd.conf
echo -e "Port has changed!"
echo "Now ,Port is $1!"
systemctl restart httpd

awk

AWK是一种处理文本文件的语言，是一个强大的文本分析工具。
awk处理机制：根据模式一次从文件中抽取一行文本，对这行文本进行切片（默认使用空白字符作为分隔符）

[root@server mnt]# cat test
this | is | a | file
$1 $2 $3 $4

awk ‘{print $0}’ test ##$0表示输出一整行

awk ‘{print $1}’ test

awk ‘{print $4}’ test

awk ‘{print $1,$2}’ test ##显示两个字段

awk -F “:” ‘{print $1,$3}’ /etc/passwd ##指定分隔符

#awk常用变量
awk ‘{print FILENAME,NR}’ /etc/passwd ##输出文件名，和当前操作的行号

awk -F: ‘{print NR,NF}’ /etc/passwd ##输出每次处理的行号，以及当前以":"为分隔符的字段个数

总结：awk ‘{print “第NR行”，“有NF列”}’ /etc/passwd
BEGIN{}:读入第一行文本之前执行的语句，一般用来初始化操作
{}:逐行处理
END{}:处理完最后以行文本后执行，一般用来处理输出结果

awk ‘BEGIN { a=34;print a+10 }’

awk -F: ‘BEGIN{print “REDHAT”} {print NR;print } END {print “WESTOS”}’ passwd ##文件开头加REDHAT，末尾加WESTOS，打印行号和内容

awk -F: ‘/bash$/{print}’ /etc/passwd ##输出以bash结尾的

awk -F: ‘NR==3 {print}’ /etc/passwd

awk -F: ‘NR % 2 == 0 {print}’ /etc/passwd ##偶数行

awk -F: ‘NR >=3 && NR <=5 {print }’ /etc/passwd 输出3到5行

awk ‘BEGIN{i=0}{i+=NF}END{print i}’ linux.txt ##统计文本总字段个数
#if单分支语句
awk -F: ‘BEGIN{i=0}{if($7/bash$/){i++}}END{print i}’ /etc/passwd ##统计登录shell为bash的用户

#if双分支
awk -F: ‘BEGIN{i=0;j=0}{if($3<=500){i++}else{j++}}END{print i,j}’ /etc/passwd ##统计uid小于等于500和大于500的用户个数

#for循环
awk ‘BEGIN{for(i=1;i<=5;i++){print i}}’

#练习：列出uid小于2的用户信息
awk -F: ‘$3 >= 0 && $3 < 2 {print $1,$3}’ /etc/passwd