shell中正则表达式和sed、awk

---

正则表达式

1.正则表达式的作用和类型

	1）正则表达式的作用
		过滤指定文件内容
	2）正则表达式类型
		基础正则表达式
		扩展正则表达式

2.基础正则表达式元字符类型

1）^
匹配指定开始内容
2）$
匹配指定结尾内容
3）.
匹配任意单个字符
4）[]
匹配括号内字符
5）*
通配符匹配所有字符
6）[^]
匹配方括号指定开始字符
7）[n1-n2]
匹配指定开始和结束内容
8）{n}
匹配多次
9）{n,}
匹配一次
10）{n,m}
匹配最低次数和最高次数
11）
转义字符

3.扩展正则表示式元字符

1）+
重复一个或者多个前一个字符
2）？
显示当前字符前边字符
3）|
或者找出多个字符
4）()
查找组字符
5）()+
查找重复组字符

4.基础正则表达式和扩展正则表达式区别

1）基础正则表达式
使用grep或者sed过滤修改配置文件
2）扩展正则表达式
使用egrep和awk过滤数据

文本处理器

一、sed工具

1.sed作用和工作流程

1）sed的作用
文本文件解释工具
支持读取、修改、显示配置文件
2）sed工作流程
读取：从文件、输入、管道符命令读取数据
执行：使用sed命令采用无交互模式修改配置文件
显示：将修改后的配置文件显示用

2、sed常见的选项和操作

1）sed常见选项
-n：显示处理结果
-h：显示帮助
-e：使用脚本或者命令处理数据
-f：使用脚本处理文本数据
-i：直接编辑文本
2）常见的操作
a：添加数据
d：删除
s：替换
p：查看
y：字符转换
c：将指定行替换指定内容

3.sed的基本应用

[root@centos01 ~]# sed -n '1,5p' test.txt			//显示符合条件内容，显示1到5行数据
[root@centos01 ~]# sed -n -e '1p;3p;5p' test.txt		//显示奇数行
[root@centos01 ~]# sed '1d' test.txt			//删除第一行数据
[root@centos01 ~]# sed -i 's/yun/YUN/' test.txt 		//替换数据将yun替换为YUN
[root@centos01 ~]# sed -i '/^192/s/^/#/' test.txt		//在IP地址前边添加注释行
[root@centos01 ~]# sed -i '1,3{H;d};18G' test.txt		//将第一到三行数据迁移到18行后边

二、awk的作用和变量

awk的作用

逐行读取并显示指定内容

awk的变量类型

FS：文本字段分隔符，可以使用空格
NF：处理行数
NR：处理行号
$0：处理整行数据
$n：处理数据列编号

2.awk的基本应用

[root@centos01 ~]# awk '{print}' test.txt 		//显示文件内容 
[root@centos01 ~]# awk '{print $1}' test.txt 		//实现第一列数据
[root@centos01 ~]# awk '{print $1,$2}' test.txt		//查看第一列和第二列数据 
[root@centos01 ~]# awk '{print $1"#####"$2}' test.txt 		//第一列和第二列数据使用#号作为分隔符
[root@centos01 ~]# awk 'NR==1,NR==2{print}' test.txt		//查看第一行和第二行
[root@centos01 ~]# awk -F : {'print $7'} /etc/passwd		//显示第七列数据