二.文本处理工具

一.grep

grep
grep -E = egrep

(一)grep格式

命令及参数	匹配条件	处理的文件	含义
grep	root	/etc/passwd	过滤root关键字
grep	^root	/etc/passwd	以root开头
grep	root$	/etc/passwd	以root结尾
grep -i	root	passwd	忽略大小写
grep -E	“\注<root”	passwd	root字符之前不能有字符
grep -E	“root\注>”	passwd	root字符之后不能有字符
grep -数字	adm	passwd	显示过滤行以及上面几行和下面几行
grep -n	adm	passwd	显示匹配的行所在行号
grep -A数字	adm	passwd	显示过滤行以及下面几行
grep -B数字	adm	passwd	显示过滤行以及上面几行
grep -v	adm	passwd	反向过滤

(二)grep字符数量匹配规则

匹配条件	含义
^westos	以westos开有
westos$	以westos结尾
w…s	w开头s结尾中间4个任意字符
…s	s结尾前面5个任意字符
*	字符出现任意次
?	0到1次
+	1次到任意次
{n}	n次
{m,n}	m到n次
{0,n}	0-n次
{,n}	0-n次
{m,}	最少m次

(ss){2}ss字符串出现2次

练习脚本：

请显示系统中能被su命令切换的用户名称

二.sed

(一)命令格式：

sed 参数 命令 处理对象
sed 参数 处理对象 -f 处理规则文件

对整行字符的处理

sed	参数	命令	处理对象	含义
sed		p		显示
sed	-n	5p	westos	显示第五行
sed	-n	3,5p	westos	显示3到5行
sed	-ne	‘3p;5p’	westos	显示3和5行
sed	-ne	1,5p	westos	1-5行
sed	-ne	‘5,$p’	westos	5到最后以行
sed	-n	‘/^#/p’	fstab	显示以#开头的行

sed	参数	处理对象	含义
sed	d		删除
sed	5d	westos	删除第五行
sed	‘/^#/d’	fstab	把#开头的行删除
sed	‘/^UUID/!d’	fstab	除了UUID以外的行都删除
sed	-e ‘5,$d’	westos	5行之后都删除

sed	参数	处理对象
sed	a
sed	-e ‘$a hello world’	fstab
sed	-e ‘$a hello\nworld’	fstab
sed	-e ‘/^#/a hello world’	fstab

sed	参数	处理对象
sed	c	替换
sed	-e ‘/^#/c hello world’	fstab
sed	‘5c hello world’	westos

sed	参数	处理对象	含义
sed	w		把符合的行写到指定文件中
sed	‘/^UUID/w westofile’	fstab	把fstab中UUID开头的行写入westosfile中

sed	参数	处理对象	含义
sed	i		插入
sed	‘5i hello westos’	westos
sed	r		整合文件
sed	‘2r haha’	westos

（二）sed 字符替换

笑脸=：/
/=@

sed	参数	处理对象	含义
sed	‘s/😕###/g’	westos
sed	‘s/😕###/’	westos
sed	‘1,5s/😕###/g’	westos
sed	‘1s/😕###/g’	westos
sed	‘1s/😕###/g;5s/😕###/g’	westos
sed	‘/lp/,/shutdown/s/😕###/g’	westos
sed	‘s///####/g’	westos
sed	‘s@/@####@g’	westos

sed ‘s@/@####@g’ -i passwd 把sed处理的内容保存到passwd文件中

标题练习及脚本

Apache_port.sh
此脚本后介入数字，http的端口就改为此数字，假设selinux为关闭状态

  1 #!/bin/bash/
  ##判断输入是否为空
  2 [ -z "$1" ] && {
  3   echo -e "\033[31mError:Please input port following script!!\033[0m"
  4   exit
  5 }
  ##判断是否安装httpd
  6 rpm -q httpd &>/dev/null ||{
  7   echo -e "\033[31mError:Apache is not installed!!\033[0m"
  8   exit
  9 }
  ##判断是否是超户
 10 [ "$USER" != "root" ] && {
 11   echo -e "\033[31mError:Please run script with root!!\033[0m"
 12   exit
 13 }
 ##判断端口号是否被占用
 14 netstat -antlupe | grep -E ":$1\>" &>/dev/null &&{
 15  echo -e "\033[31mError:Port $1 is in used!!\033[0m"
 16  exit
 17 }
 ##更改端口号
 18 sed "45c Listen $1" -i /etc/httpd/conf/httpd.conf
 19 systemctl restart httpd

三.awk

awk -F 分隔符 BEGIN{}{}END{} FILENAME

NR #行数
NF #列数

FILENAME #文件名称本身
westos #westos变量值
“westos” #westos字符串


/bash$/ #条件
/条件1|条件2/ #条件1或者条件2
/条件1/||/条件2/ #条件1或者条件2
/条件1/&&/条件2/ #条件1并且条件2


$0 #所有的列
$1 #第一列
$2 #第二列
$3 #第三列

#/etc/passwd文件的第六列没有home关键字并且以bash结尾的行

练习：

统计在系统中能su切换的并且用户家目录不在/home下的用户数量