sed学习笔记2019

sed流编辑器

sed的工作流程

sed 是一种在线的、非交互式的编辑器，一次处理一行内容。

1. 把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space）
2. 用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕
3. 处理下一行，这样不断重复，直到文件末尾。

注意:
默认情况下使用sed,文件内容并没有改变，除非你使用重定向存储输出

---

sed的用途

1. 自动编辑一个或多个文件；
2. 简化对文件的反复操作；
3. 编写转换程序等

---

sed命令格式

sed [options] ‘command’ file(s)
sed [options] -f scriptfile file(s)

注意：

• sed和grep不一样，不管是否找到指定的模式，它的退出状态都是0
• 只有当命令存在语法错误时，sed的退出状态才是非0

---

支持正则表达式

sed在文件中查找模式时可以使用正则表达式(RE)和各种元字符。
正则表达式是括在斜杠间的模式，用于查找和替换

sed支持的元字符:

• 基本元字符集 ^, $, ., *, [], [^], \< \>,\( \),\{ \}
• 扩展元字符集 ?, +, { }, |, ( )

使用扩展元字符的方式：

• \+
• sed -r

---

sed基本用法

//不推荐使用

~~#sed -r '' /etc/passwd~~   
~~#sed -r 'p' /etc/passwd~~  
~~#sed -r -n 'p' /etc/passwd~~  
~~#sed -r -n '/root/p'  /etc/passwd~~ 

---

常用方法

# sed -r 's/root/alice/'  /etc/passwd   //只替换当前行的第一个匹配项
# sed -r 's/root/alice/g'  /etc/passwd  //替换当前行所有匹配项 
# sed -r 's/root/alice/gi'  /etc/passwd //替换当前行所有匹配项,并忽略大小写
 
# sed -r '/root/d'  /etc/passwd 
# sed -r '\crootcd' /etc/passwd 

查找替换的字符串包含 " / "

cat a.txt
/etc/abc/456 
etc 

# sed -r '//etc/abc/456/d' a.txt  
sed：-e 表达式  #1，字符  0：no previous  regular expression

# sed -r '/\/etc\/abc\/456/d'  a.txt  
/etc/abc/456 

sed扩展

地址(定址)

地址用于决定对哪些行进行编辑。
地址形式可以是数字、正则表达式或二者的结合。
如果没有指定地址，sed将处理输入文件中的所有行。

# sed -r 'd' /etc/passwd   
# sed -r '3d' /etc/passwd 
# sed -r '1,3d' /etc/passwd 
# sed -r '/root/d'  /etc/passwd 
# sed -r '/root/,5d'  /etc/passwd 
# sed -r 's/root/alice/g'  /etc/passwd 
 
# sed -r '/^adm/,+20d'  /etc/passwd 
# sed -r '2,5d' /etc/passwd 
# sed -r '/root/d'  /etc/passwd 
# sed -r '/root/!d'  /etc/passwd 
 
# sed -r '1~2d' /etc/passwd  //删除所有奇数行  odd-numbered 
# sed -r '0~2d' /etc/passwd  //删除所有偶数行  even-numbered 

sed命令

sed命令告诉sed对指定行进行何种操作
包括打印、删除、修改等。

命令	功能
a	在当前行后添加一行或多行
c	用新文本修改（替换）当前行中的文本
d	删除行
i	在当前行之前插入文本
l	列出非打印字符
p	打印行
n	读入下一输入行，并从下一条命令而不是第一条命令开始对其的处理
q	结束或退出sed
!	对所选行以外的所有行应用命令
s	用一个字符串替换另一个
g	在行内进行全局替换
i	忽略大小写
r	从文件中读
w	将行写入文件
y	将字符转换为另一字符（不支持正则表达式）
h	把模式空间里的内容复制到暂存缓冲区(覆盖)
H	把模式空间里的内容追加到暂存缓冲区
g	取出暂存缓冲区的内容，将其复制到模式空间，覆盖该处原有内容
G	取出暂存缓冲区的内容，将其复制到模式空间，追加在原有内容后面
x	交换暂存缓冲区与模式空间的内容

sed选项

选项	功能
-e	允许多项编辑
-f	指定sed脚本文件名
-n	取消默认的输出
-i inplace，	就地编辑
-r	支持扩展元字符

sed命令示例

删除命令：d

# sed -r '3d' datafile 
# sed -r '3{d;}'  datafile 
# sed -r '3{d}'  datafile 
 
# sed -r '3,$d' datafile 
# sed -r '$d' datafile 
# sed -r '/north/d'  datafile  
# sed -r '/sout/d'  datafile 

替换命令：s

# sed -r 's/west/north/g'  datafile  
# sed -r 's/^west/north/'  datafile  
# sed -r 's/[0-9][0-9]$/&.5/'  datafile //&代表在查找串中匹配到的内容 
# sed -r 's/Hemenway/Jones/g'  datafile  
# sed -r 's/(Mar)got/\1ianne/g'  datafile   
# sed -r 's#3#88#g' datafile  

读文件命令：r

# sed -r '/Suan/r  /etc/newfile' datafile   
# sed -r '2r /etc/hosts' a.txt   
# sed -r '/2/r  /etc/hosts' a.txt 

写文件命令：w

# sed -r '/north/w  newfile' datafile   
# sed -r '3,$w /new1.txt' datafile 

追加命令：a

# sed -r '2a\1111111111111'  /etc/hosts 
# sed -r '2a\1111111111111\ 
> 222222222222\ 
> 333333333333'  /etc/hosts 

插入命令：i

# sed -r '2i\1111111111111'  /etc/hosts 
# sed -r '2i111111111\ 
> 2222222222\ 
> 3333333333' /etc/hosts 

修改命令：c

# sed -r '2c\1111111111111'  /etc/hosts 
# sed -r '2c\111111111111\ 
> 22222222222\ 
> 33333333333' /etc/hosts 

获取下一行命令：n

# sed -r '/eastern/{ n; d }' datafile 
# sed -r '/eastern/{ n; s/AM/Archile/ }' datafile 

暂存和取用命令：h H g G

# sed -r '1h;$G' /etc/hosts 
# sed -r '1{h;d};$G'  /etc/hosts 
# sed -r '1h; 2,$g' /etc/hosts 
# sed -r '1h; 2,3H; $G' /etc/hosts 

暂存空间和模式空间互换命令：x

# sed -r '4h; 5x; 6G' /etc/hosts 

反向选择: !

# sed -r '3d' /etc/hosts 
# sed -r '3!d' /etc/hosts 

多重编辑选项：e

# sed -r -e '1,3d' -e 's/Hemenway/Jones/'  datafile  
# sed -r '1,3d; s/Hemenway/Jones/'  datafile  
 
# sed -r '2s/WE/UPLOOKING/g; 2s/Gray/YYY/g' datafile 
# sed -r '2{s/WE/UPLOOKING/g; s/Gray/YYY/g}' datafile 

sed常见操作

删除配置文件中#号注释行

sed -ri '/^#/d' file.conf   
sed -ri '/^[ \t]*#/d' file.conf 

删除配置文件中//号注释行

sed -ri '\Y^[ \t]*//Yd' file.conf 

删除无内容空行

sed -ri '/^[ \t]*$/d' file.conf 

删除注释行及空行：

# sed -ri '/^[ \t]*#/d; /^[ \t]*$/d'  /etc/vsftpd/vsftpd.conf 
# sed -ri '/^[ \t]*#|^[ \t]*$/d' /etc/vsftpd/vsftpd.conf 
# sed -ri '/^[ \t]*($|#)/d'  /etc/vsftpd/vsftpd.conf 

修改文件：

# sed -ri '$a\chroot_local_user=YES'  /etc/vsftpd/vsftpd.conf 
# sed -ri '/^SELINUX=/cSELINUX=disabled'  /etc/selinux/config 
# sed -ri '/UseDNS/cUseDNS no' /etc/ssh/sshd_config 
# sed -ri '/GSSAPIAuthentication/cGSSAPIAuthentication  no' /etc/ssh/sshd_config 

给文件行添加注释：

# sed -r '2,6s/^/#/'  a.txt 
# sed -r '2,6s/(.*)/#\1/'  a.txt 
# sed -r '2,6s/.*/#&/' a.txt &匹配前面查找的内容 
# sed -r '3,$ s/^#*/#/' a.txt 将行首零个或多个#换成一个# 
# sed -r '30,50s/^[ \t]*#*/#/' /etc/nginx.conf 
# sed -r '2,8s/^[ \t#]*/#/' /etc/nginx.conf 

sed中使用外部变量

# var1=11111 
# sed -ri "3a$var1" /etc/hosts 
# sed -ri "$a$var1" /etc/hosts 
# sed -ri '$a\'"$var1" /etc/hosts 
# sed -ri 3a$var1 /etc/hosts 
# sed -ri "\$a$var1" /etc/hosts