Shell编程三剑客之Sed
一: 文本处理器
- 在 Linux/UNIX 系统中包含很多种文本处理器或文本编辑器,其中包括我们之前学习过的VIM 编辑器与 grep 等。
- 而 grep,sed,awk 更是 shell 编程中经常用到的文本处理工具,被称之为 Shell 编程三剑客。
1.1:sed工具概述
-
sed(Stream EDitor)是一个强大而简单的文本解析转换工具,可以读取文本,并根据指定的条件对文本内容进行编辑(删除、替换、添加、移动等),最后输出所有行或者仅输出处理的某些行。
-
sed 也可以在无交互的情况下实现相当复杂的文本处理操作,被广泛应用于 Shell 脚本中,用以完成各种自动化处理任务。
1.2:sed的工作流程
- 读取——》执行——》显示三个过程
- 在所有的文件内容都被处理完成之前,上述过程将重复执行,直至所有内容被处理完
- 默认情况下,所有的 sed 命令都是在模式空间内执行的,因此输入的文件并不会发生任何变化,除非是用重定向存储输出
1.2.1:读取
sed 从输入流(文件、管道、标准输入)中读取一行内容并存储到临时的缓冲区中(又称模式空间,pattern space)。
1.2.2:执行
默认情况下,所有的 sed 命令都在模式空间中顺序地执行,除非指定了行的地址,否则 sed 命令将会在所有的行上依次执行
1.2.3:显示
发送修改后的内容到输出流。再发送数据后,模式空间将会被清空。
注意:默认情况下所有的 sed 命令都是在模式空间内执行的,因此输入的文件并不会发生任何变化,除非是用重定向存储输出。
1.3:sed命令常见方法
- 通常情况下调用 sed 命令有两种格式
sed[选项] '操作' 参数
sed [选项] -f scriptfile 参数
-
其中,“参数”是指操作的目标文件,当存在多个操作对象时用,文件之间用逗号“,”分隔;
-
而 scriptfile 表示脚本文件,需要用“-f”选项指定,当脚本文件出现在目标文件之前时,表示通过指定的脚本文件来处理输入的目标文件
1.3.1:常见的sed命令选项
选项 | 解释 |
---|---|
-e 或–expression= | 表示用指定命令或者脚本来处理输入的文本文件 |
-f 或–file= | 表示用指定的脚本文件来处理输入的文本文件 |
-h 或–help | 显示帮助 |
-n、–quiet 或 silent | 表示仅显示处理后的结果 |
-i | 直接编辑文本文件,直接编辑源文件 |
1.3.2:常见的操作
- “操作”用于指定对文件操作的动作行为,也就是 sed 的命令
- 通常情况下是采用的[n1[,n2]]”操作参数的格式。n1、n2 是可选的,代表选择进行操作的行数
- 如操作需要在 5~20 行之间进行,则表示为“5,20 动作行为
操作 | 解释 |
---|---|
a | 增加,在当前行下面增加一行指定内容 |
c | 替换,将选定行替换为指定内容 |
d | 删除,删除选定的行 |
i | 插入,在选定行上面插入一行指定内容 |
p | 打印,如果同时指定行,表示打印指定行;如果不指定行,则表示打印所有内容;如果有非打印字符,则以 ASCII 码输出。其通常与“-n”选项一起使用 |
s | 替换,替换指定字符 |
y | 字符转换 |
1.4:sed用法示例
1.4.1:输出符合条件的文本(p 表示正常输出)
[root@localhost ~]# sed -n 'p' httpd.conf 输出所有内容,等同于 cat httpd.conf
...省略内容
[root@localhost ~]# sed -n '3p' httpd.conf 输出第 3 行
...省略内容
[root@localhost ~]# sed -n '3,5p' httpd.conf 输出第 3~5 行
...省略内容
[root@localhost ~]# sed -n 'p;n' httpd.conf 输出所有奇数行,n 表示读入下一行资料
...省略内容
[root@localhost ~]# sed -n 'n;p' httpd.conf 输出所有偶数行,n 表示读入下一行资料
...省略内容
[root@localhost ~]# sed -n '1,5{p;n}' httpd.conf 输出第 1~5