sed详解

最新推荐文章于 2023-03-15 18:23:41 发布

Mr丶Ding

最新推荐文章于 2023-03-15 18:23:41 发布

阅读量790

点赞数

分类专栏：三剑客文章标签：正则表达式 Linux

本文链接：https://blog.csdn.net/MrDing991124/article/details/78598078

版权

三剑客专栏收录该内容

4 篇文章 0 订阅

订阅专栏

sed介绍

sed是一种流编辑器，它是文本处理中非常中的工具，能够完美的配合正则表达式使用，功能不同凡响。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern
space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有
改变，除非你使用重定向存储输出。Sed主要用来自动编辑一个或多个文件；简化对文件的反复操作；编写转换程序等。

命令语法
sed [options] ‘command’ filename
sed [options] -f scriptfile filename
命令描述
使用sed可以实现grep的大部分功能，而且还可以查找替换指定字符。
命令选项
p 打印出一个文件的全部内容；
-n 选项-n和p命令一起使用表示显示script处理后的结果；
-e 在一行中同时使用多个条件；
-r 代表脱义符\;
-e 在一行命令中同时有多个条件是使用-e选项 ;

实战（上）

1.打印包含某个字符串的行

[root@localhost sed]# sed -n '/root/'p test.txt    //这里的p命令是打印输出， -n选项在有匹配条件的时候需要加上
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin

[root@localhost sed]# sed -n '/r.t/'p test.txt    
operator:x:11:0:operator:/root:/sbin/nologin
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin

[root@localhost sed]# sed -n '/r*t/'p test.txt
root:x:0:0:root:/root:/bin/bash
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
operator:x:11:0:operator:/root:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
systemd-bus-proxy:x:999:997:systemd Bus Proxy:/:/sbin/nologin
systemd-network:x:192:192:systemd Network Management:/:/sbin/nologin
dbus:x:81:81:System message bus:/:/sbin/nologin
polkitd:x:998:996:User for polkitd:/:/sbin/nologin
tss:x:59:59:Account used by the trousers package to sandbox the tcsd daemon:/dev/null:/sbin/nologin
postfix:x:89:89::/var/spool/postfix:/sbin/nologin
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin

[root@localhost sed]# sed -nr '/r+o/'p test.txt    //这里的r命令，代表这“/”脱义。如果不加r命令可以写成 sed -n '/r\+o/'p test.txt
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin
systemd-bus-proxy:x:999:997:systemd Bus Proxy:/:/sbin/nologin
tss:x:59:59:Account used by the trousers package to sandbox the tcsd daemon:/dev/null:/sbin/nologin
chrony:x:997:995::/var/lib/chrony:/sbin/nologin

[root@localhost sed]# sed -nr '/o{2}/'p test.txt    //匹配两次带0的列
root:x:0:0:root:/root:/bin/bash
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
postfix:x:89:89::/var/spool/postfix:/sbin/nologin

[root@localhost sed]# sed -nr '/root|bus/'p test.txt    //匹配带有root或者bus的列
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin
systemd-bus-proxy:x:999:997:systemd Bus Proxy:/:/sbin/nologin
dbus:x:81:81:System message bus:/:/sbin/nologin

2.打印指定的行

[root@localhost sed]# sed -n '2'p test.txt    //打印test.txt文件的第2行
12222:1o:1:bin

[root@localhost sed]# sed -n '2,5'p test.txt    //打印test.txt文件的第2行到第2行
12222:1o:1:bin
asdfasd:rao:111
f22222:r>o:asdfasdf
bin:x:1:1:bin:/bin:/sbin/nologin

[root@localhost sed]# sed -n '25,$'p test.txt    //打印test.txt文件的25行到末尾(这里的$代表末尾)
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
chrony:x:997:995::/var/lib/chrony:/sbin/nologin
user1:x:1000:1000::/home/user1:/bin/bash
user2:x:1001:1002::/home/user2:/bin/bash
dd1:x:1002:1004::/home/dd1:/bin/bash
user4:x:1005:1003::/home/user4:/bin/bash
user5:x:1010:1003::/home/dd1:/sbin/nologin
user11:x:1011:1011::/home/user11:/bin/bash

[root@localhost sed]# sed '/ss/'p test.txt    //打印test.txt文件的全部内容。或者使用 sed -n '1,$'p test.txt 
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin
...........................

3.使用-e选项一条命令同时有多个条件

[root@localhost sed]# sed -e '1'p -e '/bus/'p -n test.txt
root:x:0:0:root:/root:/bin/bash
systemd-bus-proxy:x:999:997:systemd Bus Proxy:/:/sbin/nologin
dbus:x:81:81:System message bus:/:/sbin/nologin

说明: sed -e ‘1’p -e ‘/bus/’p -n test.txt 命令 1 是指打印第一行； bus
是指匹配带有bus的列；
-e 的作用是一条命令同时可以有多个条件。

[root@localhost sed]# sed -e '1'p -e '/root/'p -n test.txt
root:x:0:0:root:/root:/bin/bash
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin

说明：可以看出打印出来的结果第1行和第2行是重复的。其中第1行是命令中 -e ‘1’p 的结果，第2,3行是 -e’/root/’p
的结果。当打印的内容和匹配的内容相同时，会分别显示，互不影响。

实战（下）

命令 I 忽略大小写

[root@localhost sed]# sed -n '/dll/'Ip test.txt
bin:x:1:1:bin:/bin:/sbin/nologin/dll
daemon:x:2:2:daemon:/sbin:/sbin/nologin/Dll

4.命令d 在屏幕上删除指定的行

[root@localhost sed]# wc -l test.txt    //查询文件的行数
32 test.txt
[root@localhost sed]# sed '1,25'd test.txt    //使用命令d删除1到25行的内容。（注意仅仅是在屏幕中删除，实际并没有真正的删除）
chrony:x:997:995::/var/lib/chrony:/sbin/nologin
user1:x:1000:1000::/home/user1:/bin/bash
user2:x:1001:1002::/home/user2:/bin/bash
dd1:x:1002:1004::/home/dd1:/bin/bash
user4:x:1005:1003::/home/user4:/bin/bash
user5:x:1010:1003::/home/dd1:/sbin/nologin
user11:x:1011:1011::/home/user11:/bin/bash
[root@localhost sed]# wc -l test.txt    //查询文件的行数
32 test.txt

5.选项-i真实永久的删除文件的指定内容

[root@localhost sed]# wc -l test.txt           //查询文件的行数
32 test.txt
[root@localhost sed]# sed -i '1,25'd test.txt        //删除test.txt文件中的1到25行。
[root@localhost sed]# wc -l test.txt           //查看行数
7 test.txt


[root@localhost sed]# sed -i '/nologin/'d test.txt
[root@localhost sed]# wc -l test.txt
13 test.txt

6.替换字符或字符串

[root@localhost sed]# sed '1,10s/root/toor/'g test.txt    //在屏幕上替换root为toor并打印（在真实的test.txt文件中并没有真的替换） 这里的1，10是指前10行
toor:x:0:0:toor:/toor:/bin/bash
12222:1o:1:bin
asdfasd:rao:111
f22222:r>o:asdfasdf
bin:x:1:1:bin:/bin:/sbin/nologin/dll
222222:r.o1o:asdfasd
asdfasdf:ol:ddd
daemon:x:2:2:daemon:/sbin:/sbin/nologin/Dll
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt

[root@localhost sed]# sed -r  '1,10s/ro+/ro/'g test.txt |head -10
rot:x:0:0:rot:/rot:/bin/bash
12222:1o:1:bin
asdfasd:rao:111
f22222:r>o:asdfasdf
bin:x:1:1:bin:/bin:/sbin/nologin/dll
222222:r.o1o:asdfasd
asdfasdf:ol:ddd
daemon:x:2:2:daemon:/sbin:/sbin/nologin/Dll
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin

上例中的 ‘s’ 就是替换的命令， ‘g’ 为本行中全局替换，如果不加 ‘g’ 只换该行中出现的第一个。除了可以使用 ‘/’
作为分隔符外，还可以使用其他特殊字符例如 ‘#’ 或者 ‘@’ 都没有问题。

7.真实永久的替换文件的内容（注意加-i选项）

[root@localhost sed]# sed -i ‘s/ot/to/g’ test.txt | head -n5 test.txt //由于文件过长，这里只查看前5行
rtoo:x:0:0:rtoo:/rtoo:/bin/bash
12222:1o:1:bin
asdfasd:rao:111
f22222:r>o:asdfasdf
bin:x:1:1:bin:/bin:/sbin/nologin/dll

这样就可以直接更改test.txt文件中的内容了。

8.调换两个字符串的位置

[root@localhost sed]# head -5 test.txt
root:x:0:0:root:/root:/bin/bash
12222:1o:1:bin
asdfasd:rao:111
f22222:r>o:asdfasdf
bin:x:1:1:bin:/bin:/sbin/nologin/dll
[root@localhost sed]# head -5 test.txt |sed -r 's/([^:]+):(.*):([^:]+)/\3:\2:\1/'
/bin/bash:x:0:0:root:/root:root
bin:1o:1:12222
111:rao:asdfasd
asdfasdf:r>o:f22222
/sbin/nologin/dll:x:1:1:bin:/bin:bin

说明：上例中用 () 把所想要替换的字符括起来成为一个整体，因为括号在sed中属于特殊符号，所以需要在前面加脱意字符 ‘’, 替换时则写成
‘1’, ‘‘2’, ‘‘3’ 的形式。

9.在屏幕上指定替换文件中的内容

[root@localhost sed]# head test.txt    //没有替换前的内容
root:x:0:0:root:/root:/bin/bash
12222:1o:1:bin
asdfasd:rao:111
f22222:r>o:asdfasdf
bin:x:1:1:bin:/bin:/sbin/nologin/dll
222222:r.o1o:asdfasd
asdfasdf:ol:ddd
daemon:x:2:2:daemon:/sbin:/sbin/nologin/Dll
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
[root@localhost sed]# head test.txt|sed 's/\/root/123/g'    //把/root替换成123，这里的\是脱义
root:x:0:0:root:123:/bin/bash
12222:1o:1:bin
asdfasd:rao:111
f22222:r>o:asdfasdf
bin:x:1:1:bin:/bin:/sbin/nologin/dll
222222:r.o1o:asdfasd
asdfasdf:ol:ddd
daemon:x:2:2:daemon:/sbin:/sbin/nologin/Dll
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin

10.真实永久的的替换文件中的内容（注意加-i）

[root@localhost sed]# sed -i 's/\/root/123/g' test.txt
[root@localhost sed]# head test.txt
root:x:0:0:root:123:/bin/bash
12222:1o:1:bin
asdfasd:rao:111
f22222:r>o:asdfasdf
bin:x:1:1:bin:/bin:/sbin/nologin/dll
222222:r.o1o:asdfasd
asdfasdf:ol:ddd
daemon:x:2:2:daemon:/sbin:/sbin/nologin/Dll
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin

11.在屏幕上把文件上的字母替换成空的（注意如果加上-i选项，这就真实永久的替换文件中的内容了）

[root@localhost sed]# head test.txt |sed 's/[a-zA-Z]//g'
::0:0::123://
12222:1:1:
::111
22222:>:
::1:1::/:///
222222:.1:
::
::2:2::/:///
::3:4:://://

12.在所有的行的最前面加上固定的字符串（注意加-r）

[root@localhost sed]# head test.txt |sed -r 's/(.*)/aaa.&/'   //还有一种方法 head test.txt |sed -r 's/^/aaa.&/'
aaa.::0:0::123://
aaa.12222:1:1:
aaa.::111
aaa.22222:>:
aaa.::1:1::/:///
aaa.222222:.1:
aaa.::
aaa.::2:2::/:///
aaa.::3:4:://://
aaa.::4:7::///://

总结

I命令表示匹配的结果不区分大小写
p命令是打印输出。
-r选项，代表这“/”脱义。
-n选项在有匹配条件的时候需要加上
-e 在一行命令中同时有多个条件是使用-e选项
d 这个命令是在屏幕上删除某行或多行，要想真实删除到文件中需要加-i选项。所以在修改前最好先复制一下文件以免改错。
s 就是替换的命令
g为本行中全局替换。
\，#，@ 可以作为分隔符，如sed ‘s@/sbin/nologin@123@g’
^ 匹配行开始，如：/^sed/匹配所有以sed开头的行。
$ 匹配行结束。
. 匹配一个非换行符的任意字符，如：/s.d/匹配s后接一个任意字符，最后是d。
*匹配0个或多个字符，如：/*sed/匹配所有模板是一个或多个空格后紧跟sed的行。
[]匹配一个指定范围内的字符，如/[ss]ed/匹配sed和Sed。
[^]匹配一个不在指定范围内的字符，如：/[^A-RT-Z]ed/匹配不包含A-R和T-Z的一个字母开头，紧跟ed的行。
匹配单词的结束，如/love>/匹配包含以love结尾的单词的行。
x{m}重复字符x，m次，如：/0{5}/匹配包含5个0的行。
x{m,}重复字符x，至少m次，如：/0{5,}/匹配至少有5个0的行。
x{m,n}重复字符x，至少m次，不多于n次，如：/0{5,10}/匹配5~10个0的行。