带你了解shell的sed编辑器操作命令

sed编辑器概述

sed是一种流编辑器，流编辑器会在编辑器处理数据之前基于预先提供的一组规则来编辑数据流。

sed编辑器可以根据命令来处理数据流中的数据，这些命令要么从命令行中输入，要么存储在一个命令文本文件中。

sed的工作流程

sed 的工作流程主要包括读取、执行和显示三个过程

●读取：sed 从输入流(文件、管道、标准输入)中读取一行内容并存储到临时的缓冲区中(又称模式空间，pattern space)

●执行：默认情况下，所有的sed命令都在模式空间中顺序地执行，除非指定了行的地址，否则sed 命令将会在所有的行上依次执行。

●显示：发送修改后的内容到输出流。在发送数据后，模式空间将会被清空。在所有的文件内容都被处理完成之前，上述过程将重复执行，直至所有内容被处理完。

在所有的文件内容都被处理完成之前，上述过程将重复执行，直至所有内容被处理完。

注意：默认情况下所有的sed命令都是在模式空间内执行的，因此输入的文件并不会发生任何变化，除非是用重定向存储输出。

命令格式:

sed -e '操作' 文件1 文件2...
sed -n -e '操作' 文件1 文件2...
sed -f 脚本文件 文件1 文件2...
sed -i -e '操作' 文件1 文件2...

sed -e 'n{
操作1
操作2
}'文件1 文件2

常用选项

选项	作用
-e或–expression	表示用指定命令来处理输入的文本文件，只有一个操作命令时可省略，一般在执行多个操作命令使用
-f 或–file	表示用指定的脚本文件来处理输入的文本文件。
-h或–help	显示帮助。
-n、–quiet或silent	禁止sed编辑器输出，但可以与p命令一起使用完成输出。
-i	直接修改目标文本文件。

常用操作

操作选项	作用
s	替换，替换指定字符。
d	删除，删除选定的行。
a	增加，在当前行下面增加一行指定内容。
i	插入，在选定行上面插入一行指定内容。
c	替换，将选定行替换为指定内容。
y	字符转换，转换前后的字符长度必须相同。
p	打印，如果同时指定行，表示打印指定行;如果不指定行，则表示打印所有内容;如果有非打印字符，则以ASCII码输出。其通常与"-n"选项一起使用。
=	打印行号。
l (小写L)	打印数据流中的文本和不可打印的ASCII字符( 比如结束符$、制表符\t)

实验操作

打印内容

sed -n -e 'p' jimeng  （不适用-n输出结果会执行2次，sed执行一次，p执行一次）

sed -n -e '=' jimeng  打印行号

sed -n -e '=;p' jimeng
sed -n -e '=' -e 'p' jimeng
打印内容和打印行号

sed -n -e 'l' jimeng  （会打印出不可打印的ASCLL符）

使用地址

sed编辑器有2种寻址方式:

1、以数字形式表示行区间

2、用文本模式来过滤出行

sed -n '1p' jimeng
sed -n '$p' jimeng
sed -n '1,+3p' jimeng      #打印1之后的连续3行，即1-4行
sed '5q' jimeng            #打印前5行信息后退出，q表示退出
sed -n 'p;n' jimeng        #打印奇数行; n表示移动到下一行
sed -n 'n;P' jimeng     #打印偶数行
sed -n '2,${n;p}' jimeng
sed -n '/user/p' /etc/passwd
sed -n '/^a/p' /etc/passwd
sed -n '/bash$/p' /etc/passwd

1,正则表达式，表示至少匹配一次，这里表示至少匹配一次或多次o，然后使用-r，-r支持正则表达式，所以可以将匹配到的root都输出出来

删除行

d代表删除

sed 'd' jimeng   代表全部删除

全部删除什么都没有输出

sed '3d' jimeng   代表删除第三行

可以看到three没有了，第三行已被删除

sed '$d' jimeng  代表删除最后一行

twelve被删除，$代表最后，代表结尾

sed '2,4d' jimeng   代表删除从第二行开始删除到第4行结束，删除3行内容

sed '/^$/d' jimeng1   删除空行

可以看到空行都被删除了

删除空行还有其他办法，比如：

sed '/nologin$/d' /etc/passwd   删除以nologin为结尾的行
sed '/nologin$/!d' /etc/passwd   !是取反的意思  

删除以nologin为结尾的行，以nologin为结尾的行都被删除了

！代表取反的意思，就是我们之前是要删除以nologin结尾的行，加上！取反向意思，就是除了以nologin为结尾的行，其他都删除，可以看到，只有以nologin为结尾的行，其他都被删除了

sed '/2/,/3/d'  jimeng2   
sed '/1/,/3/d'  jimeng2
从第一个匹配位置行打开删除功能，到第二个匹配位置行关闭删除功能

从第一个匹配位置2开始删除，删除到第二个匹配行3停止删除，可以看到后面不能再匹配2了，所以不会再去删除

这里是匹配到1还是删除，第二个匹配到3停止删除，然后再继续匹配，10匹配到字符中有1，再继续开始删除，再第二次匹配到333，停止删除。继续往下匹配，匹配到155中包含1这个字符，继续开始删除，然后后面匹配不到3了，就一直删除到结尾，剩下就是删除结束输出得值

注意：在我们使用匹配字符串删除功能得时候，一定要注意，后面不能有再次匹配打开删除功能项。

替换

行范围s/旧字符串 / 新字符串 / 替换标记

四种替换标记

数字:表明新字符串将替换第几处匹配的地方

g:表明新字符串将会替换所有匹配的地方

P:打印与替换命令匹配的行，与-n一起使用

w文件:将替换的结果写到文件中

sed -n 's/root/admin/p' /etc/passwd      将root使用admin替换
sed -n 's/root/admin/gp' /etc/passwd     输入g将root全部由admin替换

这里替换只会将每行第一个root给更换掉，后面得root不会更换，需要全部更换，后面需要加个g，g代表新的字符串全部替换所有匹配的地方

sed 's/root//g' /etc/passwd    将root字符全部删除，这里//表示用空格替换，等于把root删除

这里使用^符号，将第一个root替换掉、删除，其他的root并没有，想要全部删除，需要在后面加个g

这里可以看到，所有的root字符都被删除替换了

sed '1,20 s/^/#/' /etc/passwd     将1-20的开头加个# 

sed '/^root/ s/$/#/' /etc/passwd    以root开头的行在结尾加个#

可以看到root行结尾加上个#，这里使用了 '-n' 'p'进行指定，不然太多比较难找

sed -f script.sed /etc/passwd    指定脚本文件script。sed来处理/etc/passwd文件

编写个脚本

这里可以看到，原来以bash结尾的/bin/bash都被替换成/sbin/nologin，而且以nobody为开头的前面也加上了#，这就是使用指定脚本来处理文件



使用w将替换的内容保存到文件out.txt中

插入

sed ' /45/c ABC' jimeng2    将指定内容进行替换
sed ' /45/ y/45/AB/' jimeng2
sed '1,3a ABC' jimeng2
sed '1i ABC' jimeng2
sed '5r /etc/resolv.conf' jimeng2.
sed '/root/{H;d};$G' /etc/passw的    将包含root的行剪切到末尾，H表示复制到剪切板，G表示粘贴到指定行后
sed '1,2H;3,4G' /etc/passwd          将1、2行复制到3和4行的下面
echo  "111222333" | sed -r 's/ (111) (222)/\2\1/'         将字符111和222 互换位置
echo  "111222333" | sed -r 's/^(.) (.*) (.)$/\3\2\1/'     将第一个字符和最后一个字符互换