一.sed编辑器
- sed是一种流编辑器,流编辑器会在编辑器处理数据之前基于预先提供的一组规则来编辑数据流。
- sed编辑器可以根据命令来处理数据流中的数据,这些命令要么从命令行中输入,要么存储一个命令文本文件中。
二.sed 的工作流程
1.读取: sed从输入流(文件、管道、标准输入〉中读取一行内容并存储到临时的缓冲区中(又称模式空间,pattern space)。
2.执行:默认情况下,所有的sed命令都在模式空间中顺序地执行,除非指定了行的地址,否则sed命令将会在所有的行上依次执行。
3.显示:发送修改后的内容到输出流。在发送数据后,模式空间将会被清空。
- 在所有的文件内容都被处理完成之前,上述过程将重复执行,直至所有内容被处理完。
- 注意:默认情况下所有的sed命令都是在模式空间内执行的,因此输入的文件并不会发生任何变化,除非是用重定向存储输出。
三.sed 的使用
1.命令格式
sed -e '操作' 文件l 文件2 ...
sed -n -e '操作' 文件1 文件2 ...
sed -f 脚本文件 文件1 文件2 ...
sed -i -e '操作' 文件1 文件2 ...
sed -e 'n{
操作l
操作2
...
}' 文件1 文件2 ...
2.常用选项
选项 | 作用 |
---|---|
-e或–expression= | 表示用指定命令来处理输入的文本文件,只有一个操作命令时可省略,一般在执行多个操作命令使用 |
-f或–file= | 表示用指定的脚本文件来处理输入的文本文件 |
-h或–help | 显示帮助 |
-n、–quiet或silent | 禁止sed编辑器输出,但可以与p命令一起使用完成输出 |
-i | 直接修改目标文本文件 |
3.常用操作
选项 | 作用 |
---|---|
s | 替换,替换指定字符 |
d | 删除,删除选定的行 |
a | 增加,在当前行下面增加一行指定内容 |
i | 插入,在选定行上面插入一行指定内容 |
c | 替换,将选定行替换为指定内容 |
y | 字符转换,转换前后的字符长度必须相同 |
p | 打印,如果同时指定行,表示打印指定行;如果不指定行,则表示打印所有内容,如果有非打印字符,则以ASCII码输出。其通常与"-n"选项一起使用 |
= | 打印行号 |
l(小写L) | 打印数据流中的文本和不可打印的AscII字符(比如结束符$、制表符\t) |
- 打印内容
sed -n -e 'p' testfile1
sed -n -e '=' testfile1
sed -n -e 'l'testfile1
sed -n -e '=;p' testfile1
sed -n -e '=' -e 'p'testfile1
-
- 示例:
4.sed编辑器有2种寻址方式:
- 以数字形式表示行区间
- 用文本模式来过滤出行
sed -n '1p' testfile1 #打印第1行
sed -n '$p' testfile1 #打印最后一行
sed -n '1,3p' testfile1 #打印1到3行
sed -n '3,$p' testfile1 #从第3行开始打印,直到最后一行结束
sed -n '1,+3p' testfile1 #打印第1行之后的连续3行,即1-4行
sed '5q' testfile1 #打印前5行信息后退出,q表示退出
sed -n 'p;n' testfile1 #打印奇数行,n表示移动到下一行
sed -n '3{p;n;n;p}' testfile1 #打印第3,5行
sed -n 'n;p' testfile1 #打印偶数行
sed -n '2,$(n;p)' testfile1 #从第2行开始,从下一行开始打印,即第3、5、7行
sed -n '/user/p' /etc/passwd #打印包含user的行
sed -n '/^a/p' /etc/passwd #打印以a开头的行
sed -n '/bath$/p' t/etc/passwd #打印以bath结尾的行
sed -n '/ftp\|root/p' /etc/passwd #打印含有ftp或者root的行
sed -nr '/ftp|root/p' /etc/passwd #-r表示支持扩展正则表达式
sed -n '2,/nobody/p' /etc/passwd #打印从第2行开始,直到第一个包含nobody的行结束
sed -n '2,/nobody/=' /etc/passwd #打印从第2行开始,直到第一个包含nobody的行结束的行号
sed -nr '/ro{1,}t/p' /etc/passwd #打印包含root的行,root中o的个数可以是1个以上
-
- 示例:
- 删除行
sed 'd' testfile1 #全删
sed '3d' testfile1 #删除第3行
sed '2,4d' testfile1 #删除第2到4行
sed '$d' testfile1 #删除最后一行
sed '/^$/d' testfile1 #删除空行
sed '/nologin$/d' /etc/passwd #删除以nologin结尾的文件
sed '/nologin$/!d' /etc/passwd #"!"表示取反
sed '/2|3/d' testfile2 #删除第2行和第3行
sed '/2/,/3/d' testfile2 #从第一个位置打开行删除功能,到第二个位置关闭行删除功能
sed '/1/,/3/d' testfile2 #从第一个包含1的行打开删除功能,到第一个包含3的行关闭删除功能,然后接着往下扫描重复之前操作,若包含3的行不存在,则一删到底
-
- 示例:
- 替换
行范围 s/旧字符/新字符串/替换标记
5.4种替换标记
选项 | 作用 |
---|---|
数字 | 表明新字符串将替换第几处匹配的地方 |
g | 表明新字符串将会替换所有匹配的地方 |
p | 打印与替换命令匹配的行,与-n一起使用 |
w | 将替换的结果写到文件中 |
sed -n 's/root/admin/p' /etc/passwd #将匹配行中第一个root替换为admin然后打印替换的行
sed -n 's/root/admin/2p' /etc/passwd #将匹配行中第二个root替换为admin然后打印替换的行
sed -n 's/root/admin/gp' /etc/passwd #将匹配行所有root替换为admin然后打印替换的行
sed -n 's/root/admin/gw file' /etc/passwd #将匹配行所有root替换为admin然后保存替换的行至file
sed -n 's/root/admin/gp' /etc/passwd > file #将匹配行所有root替换为admin然后保存替换的行至file
sed 's/root//g' /etc/passwd #将匹配行所有root替换为空的
sed 'l,20 s/^/#/' /etc/passwd #在第1到20行进行注释
sed '/^root/ s/$/#/' /etc/passwd #将以root开头的行进行注释
sed '/root/ s/^/#/' /etc/passwd #将包含root的行进行注释
sed -rn 's /.*root.*/#&/p' /etc/passwd #用正则匹配行内容,然后通过&获取前面匹配的内容进行注释后打印
sed -f script.sed testfile2 #对某个文件执行指定命令文件
sed 'l,20w out.txt' /etc/passwd
sed '1,20 s/^/#/w out.txt' /etc/passwd #将文件的第1到20行进行注释,然后将修改的行内容保存至指定文件
sed -n 's/\/bin\/bash/\/bin\/csh/p' /etc/passwd #将文件中/bin/bash替换为/bin/csh,然后打印替换的行
sed -n 's!/bin\/bash!/bin\/csh!p' /etc/passwd #使用"!"作为字符串分隔符,可以使用除了斜杠的其他字符
sed -i 's9\945\9\99\98\939' /etc/passwd #将94599替换为9893
-
- 示例:
- 插入使用
sed '/45/c ABC' testfile2 #将含有4或5的行都替换为ABC
sed 'y/145/ABC/' testfile2 #使所有的1字符转换成a,所有的2字符转换成B,所有的3字符转换成c
sed 'l,3a ABC' testfile2 #在第1行到第3行后都插入ABC新的一行
sed 'li ABC' testfile2 #在第一行前插入ABC新的一行
sed '5r /etc/resolv.conf' testfile2 #在第5行读取/etc/resolv.conf文件保持空间的使用
sed '/root/{H;d};$G’ /etc/passwd #将包含root的行剪切到末尾,H表示复制到剪切板,G表示粘贴到指定行后
sed '1,2H;3,4G' /etc/passwd #将1、2行复制到3和4行的下面
-
- 示例:
- 高级使用(sed分组概念)
echo "111222333" | sed -r 's/(111)(222)/\2\1/' #将字符111和 222互换位置
echo "111222333" | sed -r 's/^(.)(.*)(.)$/\3\2\1/' #将第一个字符和最后一个字符互换
-
- 示例: