文本处理工具grep/sed/awk

均在模式空间中处理，不改原文件

1.grep

grep:Globally search a Re gular Expression and Print
grep
grep -E = egrep

1.grep格式
grep 匹配条件 处理文件

grep root passwd	过滤root关键字
grep ^root passwd	以root开头
grep root$ passwd	以root结尾
grep -i root passwd	忽略大小写
grep -E “<root” passwd	root字符之前不能有字符
grep -E “root>” passwd	root字符之后不能有字符
grep -数字	显示过滤行以及上下各几行
grep -n	显示匹配的行所在行号
grep -A	显示过滤行以及下面几行
grep -B	显示过滤行以及上面几行
grep -v	反向过滤

grep字符数量匹配规则

^westos	以westos开始
westos$	以westos结尾
w…s	w开头，s结尾，中间任意4个任意字符
…s	s结尾，前面5个任意字符
*	字符出现任意
?
+	0到1次
{n}	n次
{m,n}	m到n次
{0,n}	0到n次
{,n}	0到n次
{m,}	最少m次
(lee){2}	lee字符串出现2次

练习脚本：
请显示系统中能被su命令切换的用户名称

2.sed

命令格式：
sed 参数 命令 处理对象
sed 参数 处理对象 -f 处理规则文件

对字符的处理

p	显示
sed 5p westos	显示第5行
sed -n 3,5p westos	显示3到5行
sed -ne “3p;5p”	显示3和5行
sed -ne 1,5p westos	1-5行
sed -ne ‘5,$p’ westos	5到最后行
sed -n ‘/^#/p’ fstab	显示以#开头的行

d	删除
sed 5d westos	删除第5行
sed ‘/^#/d’ fstab	把#开头的行删除
sed ‘/^UUID/!d’ fstab	除了UUID以外的行都删除
sed -e ‘5,$d’ westos

a	添加
sed -e ‘$a hello world’ fstab
sed -e ‘$a hello\nworld’ fstab
sed -e ‘/^#/a hello world’ fstab

sed '1,5ahello westos' passwd	#把1到5行添加到passwd中

注：若要添加1和5行，不能直接1-5，只能使用两条命令

sed -e '1ahellowestos'  -e '5ahello westos'	 passwd

c	替换整行
sed -e ‘/^#/c hello world’ fstab
sed ‘5chello world’ westos

sed '/sbin/chellowestos' passwd	#替换所有包含sbin的行为hello westos

w	把符合的行写到指定文件中
sed ‘/^UUID/w westosfile’ westos	把westos中UUID开头的行写入westosfile中

i 插入在上面，a添加在下面

sed '5ihello westos' westos

r #整合文件

sed '5r hah' westos

sed|字符替换

sed 's/:/###/g' westos
sed 's/:/###/' westos
sed 's/:/###/g' westos
sed '1,5s/:/###/g' westos
sed '1s/:/###/g' westos
sed '1s/:/###/g;5s/:/###/g' westos
sed '/lp/,/shutdown/s/:/###/g' westos
sed 's/\//####/g' westos
sed 's@/@####@g' westos

sed 's@/@####@g' -i westos		#把sed处理的内容保存到westos文件中

练习：Apache_port.sh脚本后接数字，http的端口就改为此数字，假设selinux为关闭状态

#！/bin/bash
sed "/^Listen/c Listen $1" -i /etc/httpd/conf/httpd.conf

补充：

sed '=' passwd		#在每一行上面标注行号
sed '$=' passwd		#在最后一行前标注行号
sed -n '$=' passwd		#只显示最后一行的行号

3.awk

awk -F 分隔副 BEGIN{}{}END{} FILENAME

参数	解释
NR	行数
NF	列数
FILENAME	文件名称本身
westos	westos变量值
“westos”	westos字符串
/bash$/	条件
/条件1	条件2/
/条件1/
/条件1/&&/条件2/	条件1并且条件2
$0	所有的列
$1	第一列
$2	第二列
$3	第三列

#/etc/passwd文件的第六列没有home关键字并且以bash结尾的行
awk -F : ‘KaTeX parse error: Expected 'EOF', got '&' at position 10: 6!～/home/&̲&/bash/{print}’ /etc/passwd