LINUX SHELL的神器，sed

我们知道，Vim 采用的是交互式文本编辑模式，你可以用键盘命令来交互性地插入、删除或替换数据中的文本。但本节要讲的 sed 命令不同，它采用的是流编辑模式，最明显的特点是，在 sed 处理数据之前，需要预先提供一组规则，sed 会按照此规则来编辑数据。

sed 会根据脚本命令来处理文本文件中的数据，这些命令要么从命令行中输入，要么存储在一个文本文件中，此命令执行数据的顺序如下：

1. 每次仅读取一行内容；

2. 根据提供的规则命令匹配并修改数据。注意，sed 默认不会直接修改源文件数据，而是会将数据复制到缓冲区中，修改也仅限于缓冲区中的数据；

3. 将执行结果输出。

当一行数据匹配完成后，它会继续读取下一行数据，并重复这个过程，直到将文件中所有数据处理完毕。

1. sed 命令格式

1.1 sed的语法命令格式：

sed [选项] sed编辑命令 输入文件
shell 命令 | sed [选项] sed编辑命令、
sed [选项] -f sed脚本文件 输入文件

1.2 sed的常用选项：

-n：只显示匹配处理的行（否则会输出所有）
-e：执行多个编辑命令时（一般用；代替）
-i：直接在文件中进行修改，而不是输出到屏幕（此时不要接-n或-p命令，会导致源文件出问题）
-r：支持扩展正则表达式
-f：从脚本文件中读取内容并执行（文件中的编辑命令每行一个,不用；隔开）

1.3 sed的常用编辑命令：

p：打印匹配行 print
d：删除指定行 delete
a：在匹配行后面追加 append
i：在匹配行前面插入 insert
c：整行替换
r：将文件的内容读入 read
w：将文本写入文件 write
s：字符串替换（匹配正则表达式）substitution

1.4 sed的p命令示例：

sed -n '1,2p'  /etc/passwd   显示前面两行
sed -n '2,3p'  /etc/passwd   显示2到3行
sed -n '10p'  /etc/passwd    显示第10行
sed -n '$p' /etc/passwd    显示最后1行
sed -n '2,+2p' /etc/passwd   显示234行
sed -n '3,100!p' /etc/passwd  显示1到2行
sed -n '1p;3p;5p'  /etc/passwd  显示1,3,5，行

2. sed 模式

sed -n ‘/模式/p’ 输入文件
这里的模式可以是正则表达式也可以是精确字符
模式用/括起，扩展正则要加 -r选项
sed -n ‘/bash/p’ /etc/passwd
显示包含bash的行
sed -rn ‘/^#/!p’ /etc/grub.conf
不显示#号开头的
sed -n ‘/\/$/p’
显示以/结尾的行
sed -n ‘/^[a-z]/p’
显示以字母开头的行

PS：

#cat -n file.txt|sed -n '1~2p'
显示单数行，~表示步长

执行结果：

1  #include "stdio.h"
     3  #define MAX 10
     5  //char array[MAX] = { [0 ...(MAX-1)] = '8' };
     7
     9          for(int i = 0; i< MAX; i++)
    11          return 0;

显示偶数行

#cat -n file.txt|sed -n '0~2p'

执行输出：

2
     4
     6  char array[MAX] = {'A'};
     8  int main(void){
    10                  printf("array[%d]=%c\n",i,array[i]);
    12  }

sed里单引号和双引号的区别：

双引号里可以使用shell里的变量，单引号不能；
单引号和双引号里都可以存放模式。

3. sed的d命令示例

删除操作可以根据行号和模式匹配进行操作

sed  '3,5d' /etc/fstab  
删除3到5行
sed '/2/d' /etc/fstab
删除包含数字2的行
sed '/ext3/!d' /etc/fstab
除了包含ext3的行都删除
sed -r '/^$|^#/d' /etc/inittab

删除空行和注释

sed -e '/^$/d' -e '/^#/d' /etc/vsftpd/vsftpd.conf
sed '/^$/d  ;   /^#/d' /etc/vsftpd/vsftpd.conf

3.1 sed的a命令示例：

追加操作可以根据行号和模式匹配进行操作 ：

sed '1a 1111111111111111' /etc/fstab
在第一行后面追加后面的字符串
sed '/boot/a 1111111111111' /etc/fstab
在包含boot的行下面追加后面的字符串

3.2 sed的i命令示例

插入操作可以根据行号和模式匹配进行操作 ：

sed '$i 1111111111111111' /etc/fstab
在最后一行前面插入后面的字符串
sed '/defaults/i 1111111111111' /etc/fstab
在包含defaults的行前面插入后面的字符串

3.3 sed的c命令示例

更改整行操作可以根据行号和模式匹配进行操作

sed ‘/id:/c id:5:initdefault:' /etc/inittab
将id:所在的行整行替换成后面的字符串
sed '3c ONBOOT=no' ifcfg-eth0
将第三行改成后面的字符串

3.4 sed的r命令示例

读入操作可以根据行号和模式匹配进行操作

sed ‘$r /etc/hosts' /etc/fstab
在fstab文件的末尾后面读入hosts文件的所有内容
df -h | sed '/dev\/sda1/r /etc/mtab‘
在/dev/sda1后面读入mtab文件的内容

3.5 sed的w命令示例（w命令不加-i也是直接修改原文件！！）

写入文件操作可以根据行号和模式匹配进行操作

sed '1w abc.txt' /etc/passwd
将文件的第一行写到abc.txt（和r命令正好相反）
sed '/^#/!w abc.txt' /etc/inittab
将所有不是#开头的行都写入abc.txt
sed -r '/^#|^$/!w  abc.txt' /etc/vsftpd/vsftpd.conf
将配置文件中除了空行和注释都写入abc.txt

所以，对于sed的w命令，建议使用grep命令，然后追加到文件。

3.6 sed的s命令

格式：sed -n [行号或模式]s/查找内容/替换内容/[替换标记] 文件 替换操作可以根据行号和模式匹配进行操作 替换标记有四种

数字：替换每行的第几个
g：全局替换，否则只替换第一个字符串。例如ng从第n个开始替换
p：显示被执行替换操作的行和-n合用
w：将执行替换操作的行输出到指定文件
sed的s命令
sed -n 's/root/ROOT/2p' /etc/passwd
将文件中每行的第2个root替换为ROOT
sed '/^id/s/3/5/' /etc/inittab
将文件中找到以id开头的行中的:3:替换成:5:(先用^id找出行)
sed  '/^local_enable/s/YES/NO/'  vsftpd.conf
禁止本地用户登陆
sed 's/:/\n/g' /etc/passwd
将文件中的：号替换为换行符
sed 's/bash/nologin/ ; s/sbin/bin/' /etc/passwd
将文件中bash替换成nologin，同时将sbin替换成bin
sed -n '2,10s/^/#/p' /etc/passwd
在2到10行前面加上注释
sed -n ‘s/$/?/p' /etc/passwd
在每行末尾加上问号

sed的s命令可以使用任意分隔符作为定界符

sed  -n '/^hello/s|/bin/bash|/sbin/nologin|p' /etc/passwd
sed  -n '/^hello/s:/bin/bash:/sbin/nologin:p' /etc/passwd

注意：

-i选项是直接修改文件，小心使用 ！！！
sed -i '/模式/s/源字符/替换成/g' 文件名

4 练习

1.sed取出/etc/passwd文件的第一列
2.sed将PATH环境变量中的冒号换成换行
3.sed将PATH环境变量斜杠/换成斜杠\
4.sed修改SELINUX配置文件从开启变成禁用（/etc/sysconfig/selinux）
5.去掉/etc/passwd文件中第二个地段的x
6.修改/etc/inittab文件里的3或者5修改为6
7.编写一个脚本实现修改ip地址：
7.1.提醒用户输入ip地址和子网掩码、dns、网关
7.2.需要判断新输入的ip地址是否有人使用，如果有人使用这个ip地址，就不能去修改ip，并且提示。
7.3.刷新网络服务，让新的ip地址生效。

答案：

1.# cat passwd|sed -r 's/(^[0-Z]+)(.*)/\1/'   --》\1表示第一个标签
2.# echo $PATH|sed 's/:/\n/g'
3.# echo $PATH|sed -r 's/\//\\/g'
或者# echo $PATH|sed -r 's#/#\\#g'（以#作分界符）
4.# cat selinux|sed  '/^SELINUX=/s/enforcing/disabled/g'
5.# awk -F:   '{print $1":"$3":"$4":"$6":"$7}' passwd
或者：# awk -F: ' OFS=":"{print $1,$3,$4,$5,$6,$7}' passwd --》OFS指定分隔符
或者：# cat passwd|sed 's/:x:/::/g'
6.# cat inittab |sed -r '/^id/s/:[35]:/:6:/g'
7.
#!/bin/bash

read -p "Please input the ip:" IP
read -p "Please input the netmask:" MASK
read -p "Please input the dns server:" DNS
read -p "Please input the gateway:" GATEWAY

a=$(cat ifcfg-eth0|grep "IPADDR"|cut -d '=' -f2)
if [[ $IP == $a ]]
then
        echo "The IP:$IP is exist!!!"
else
        sed -i "{
        /IPADDR/c IPADDR=$IP
        /NETMASK/c NETMASK=$MASK
        /DNS1/c DNS1=$DNS
        /GATEWAY/c GATEWAY=$GATEWAY
        }" /lianxi/ifcfg-eth0
        echo "The IP is alter:$IP"
fi

内容大部分来自：

http://c.biancheng.net/view/4028.html

https://blog.csdn.net/qq_18312025/article/details/78231015

https://www.gnu.org/software/sed/manual/sed.html#Multiline-techniques