sed命令

一、sed命令

1、sed概念

在Linux/UNIX系统中包含很多种类的文本处理器或文本编辑器，其中包括其中包括我们之前学习过的VIM 编辑器与grep 等。而 grep，sed，awk 更是Shell 编程中经常用到的文本处理工具， 被称之为Shell 编程三剑客。

  sed（Stream EDitor）是一个强大而简单的文本解析转换工具，可以读取文本，并根据指定的条件对文本内容进行编辑（删除、替换、添加、移动等），最后输出所有行或者仅输出处理的某些行。sed也可以在无交互的情况下实现相当复杂的文本处理操作，被广泛应用于Shell脚本中，用以完成各种自动化处理任务。
sed 的工作流程主要包括读取、执行和显示三个过程。
读取：sed 从输入流（文件、管道、标准输入）中读取一行内容并存储到临时的缓冲区中（又称模式空间，pattern space）。
执行：默认情况下，所有的 sed 命令都在模式空间中顺序地执行，除非指定了行的地址，否则 sed 命令将会在所有的行上依次执行。
显示：发送修改后的内容到输出流。在发送数据后，模式空间将会被清空。
在所有的文件内容都被处理完成之前，上述过程将重复执行，直至所有内容被处理完。

注意：默认情况下所有的 sed 命令都是在模式空间内执行的，因此输入的文件并不会发生任何变化，除非是用重定向存储输出。

2、sed图示

（1）工作原理

 (2) 数据流向图

3、sed命令格式

sed -e '编辑命令' 文件1 文件2 ...
sed -n -e '编辑命令' 文件1 文件2...
sed -i -e '编辑命令' 文件1 文件2...

 常用sed选项主要包含以下几种。

-e 或 --expression=：表示用指定命令或脚本来处理输入的文本文件

-f 或 --file=：表示用指定的脚本文件来处理输入的文本文件

-h 或 --help:显示帮助。

-n、--quiet 或silent：表示仅显示处理后的结果。

-i.bak ：直接编辑文本文件

-r，-E 使用扩展正则表达式

-s 将多个文件视为独立文件，而不是单个连续的长文件流

“操作”用于指定对文件操作的动作行为，也就是sed命令。通常情况下是采用的"[n1[,n2]]" 操作参数的格式。n1、n2是可选的，代表选择进行操作的行数，如操作需要在5-20行之间进行，则表示为”5，20动作行为"。常见的操作包括以下几种：

a：增加，在当前行下面增加一行指定内容
c：替换，将选定行替换为指定内容
d：删除,删除选定的行。
i：插入，在选定行上面插入一行指定内容
p：打印，如果同时指定行，表示打印指定行;如果不指定行，则表示打印出所有内容；如果有非打印字符，则以ASCII码输出。其通常与"-n"选项一起使用。
s：替换，替换指定字符
y：字符转换。

 4、示例

（1）示例1：set 'p' 的使用案例

输出符合条件的文本（p表示正常输出）

sed -n 'p' fbc.txt    #输出所有内容等同于cat fbc.txt

 sed -n '3p' fbc.txt  #只显示fbc.txt文本中第三行的内容

 sed -n '2，4' fbc.txt  #只显示fbc.txt文本中第二行到第四行的内容

 sed -n 'p；n' fbc.txt   #第二个n表示读入下一行资料

  sed -n 'n；p' fbc.txt   #第二个n表示读入下一行资料

  sed -n '/the/p' fbc.txt  #输出包含the的行

sed -n '4,/the/p' fbc.txt  #输出从第四行至第一个包含the的行

 sed -n '/^AI/p' fbc.txt

 sed -n '/[0-9]$/p' fbc.txt  

（2）示例2：set 'd' (删除）的使用案例

 

 

 （3）示例3：set 's' (替换)的使用案例

 

 （4）示例4：set -i (编辑文本文件)的使用案例

关闭虚拟机临时增强功能

 5、sed迁移符合条件的文本

（1)使用sed命令迁移符合条件的文本时，常用参数如下：

H:复制到剪切板
g、G：将剪切板中的数据覆盖/追加至指定行
w：保存为文件
r：读取指定文件
a：增加指定内容。具体操作方法如下所示
I，i 忽略大小写

（2）示例

6、使用脚本编辑文件

使用sed脚本将多个编辑指令存放到文件中（每一条编辑指令），通过“-f ” 选项来调用

（1）示例1

 编辑一个新的文件输入

 sed -f 调用fbc.sh 操作文本fbc.txt作用和 set '1,8{H；d}；16G' fbc.txt 一模一样。

 （2）示例2：编写一个脚本用来调整vsftpd服务配置，要求禁止匿名用户，但允许本地用户（也允许写入）。

准备：关闭防火墙，关闭增强功能，安装服务

yum  install -y vsftpd

然后编辑配置文件vim local_only_ftp.sh内容如下

#!/bin/bash
#指定样本文件路径、配置文件路径
SAMPLE="/usr/share/doc/vsftpd-3.0.2/EXAMPLE/INTERNET_SITE/vsftpd.conf"
CONFIG="/etc/vsftpd/vsftpd.conf"
# 备份原来的在，若不存在则使用cp命令进行配置文件，检测文件名为/etc/vsftpd/vsftpd.conf.bak备份文件是否存文件备份
[ ! -e "$CONFIG.bak" ] && cp $CONFIG $CONFIG.bak
#基于样本配置进行调整,覆盖现有文件
sed -e '/^anonymous_enable/s/YES/NO/g' $SAMPLE > $CONFIG
sed -i -e '/^local_enable/s/NO/YES/g' -e '/^write_enable/s/NO/YES/g' $CONFIG
grep "listen" $CONFIG || sed -i '$alisten=YES' $CONFIG
#启动vsftpd服务，并设为开机后自动运行 
systemctl restart vsftpd
systemctl enable vsftpd
~                      

 授权加运行

 查看配置文件验证

 7、sed命令关于分组的一些操作

 总结

本文描写了sed配合各种参数的用法，还例举了许多简单案例，适合初级运维人员及小白观阅。