grep、sed和awk（文本处理三剑客：基础）

三剑客之grep：

作用：文本搜索工具，根据用户指定的“模式”对目标文本逐行进行匹配检查；打印匹配到的行 模式：由正则表达式字符及文本字符所编写的过滤条件

格式：grep [OPTIONS] PATTERN [FILE…]

常见选项：

• ^ 行首 $ 行尾 <, \b 语首 >, \b 语尾
  -color=auto 对匹配到的文本着色显示
  -m # 匹配#次后停止
  -v 显示不被pattern匹配到的行,即取反
  -i 忽略字符大小写
  -n 显示匹配的行号
  -c 统计匹配的行数
  -o 仅显示匹配到的字符串
  -q 静默模式，不输出任何信息 #配合$?实现条件判断
  -A # after, 后#行
  -B # before, 前#行
  -C # context, 前后各#行
  -e 实现多个选项间的逻辑or关系,如：grep –e ‘cat ’ -e ‘dog’ file
  -w 匹配整个单词
  -E 使用ERE，相当于egrep
  -F 不支持正则表达式，相当于fgrep
  -r 递归目录，但不处理软链接
  -R 递归目录，但处理软链接

注意：grep不修改文件，仅仅将输出信息过滤，即只显示想要看到的内容

[root@centos8 ~]#grep -Ev '^[[:space:]]*#|^$' /etc/selinux/config
SELINUX=disable
SELINUXTYPE=targeted   #过滤空格开头或#开头和过滤空行
[root@centos8 ~]#ip a | grep  noprefixroute | grep -Eo '([0-9]+.){3}[0-9]+' | head -n1 
10.0.0.8  #仅显示ip地址
[root@centos8 ~]#df -h | grep /dev/sda | grep -Eo '[0-9]+%' | sort -r| head -n1
9%  #显示分区最大利用率
[root@centos8 ~]#df -h | grep /dev/sd | tr -s ' '|cut -d' ' -f4  |sort -n|tail -n1
98G  #显示最大磁盘空间

---

三剑客sed：

Sed是从文件或管道中读取一行，处理一行，输出一行；再读取一行，再处理一行，再输出一行，直到最后一行。每当处理一行时，把当前处理的行存储在临时缓冲区中，称为模式空间（Pattern> Space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。一次处理一行的设计模式使得sed性能很高，sed在读取大文件时不会出现卡顿的现象。如果使用vi命令打开几十M上百M的文件，明显会出现有卡顿的现象，这是因为vi命令打开文件是一次性将文件加载到内存，然后再打开。Sed就避免了这种情况，一行一行的处理，打开速度非常快，执行速度也很快

格式：sed [option]… ‘script;script;…’ [inputfile…]

基本用法：

• -n 不输出模式空间内容到屏幕，即不自动打印
  -e 多点编辑
  -f FILE 从指定文件中读取编辑脚本
  -r, -E 使用扩展正则表达式
  -i.bak 备份文件并原处编辑
  -s 将多个文件视为独立文件，而不是单个连续的长文件流

地址格式：

1. 不给地址：对全文进行处理
2. 单地址：
   #：指定的行，$：最后一行
   /pattern/：被此处模式所能够匹配到的每一行
3. 地址范围：
   #,# #从#行到第#行，3，6 从第3行到第6行
   #,+# #从#行到+#行，3,+4 表示从3行到第7行
   /pat1/,/pat2/
   #,/pat/
4. 步进：~
   1~2 奇数行
   2~2 偶数行

注意sed相当于是方便快捷的文本编辑器，可快速修改文本内容
sed也可以做到grep的功能：

[root@centos8 ~]#cat test1.txt | sed 2p  #自动打印第二行
eth0: flags=4163<UP,BROADCAST,RUNNING,MULTICAST>  mtu 1500
        inet 10.0.0.8  netmask 255.255.255.0  broadcast 10.0.0.255
        inet 10.0.0.8  netmask 255.255.255.0  broadcast 10.0.0.255
        inet6 fe80::20c: