Shell脚本文本三剑客之sed编辑器(拥明月入怀，揽星河入梦)

已于 2023-07-04 18:18:33 修改
阅读量1.4k 收藏 4
点赞数 1
分类专栏： shell 文章标签： linux 运维 编辑器
于 2023-05-12 09:10:07 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Y0UZI/article/details/130634528
版权

文章目录

一、sed编辑器简介

    sed是一种流编辑器，流编辑器会在编辑器处理数据前基于预先提供的一组规则来编辑数据。

sed编辑器可以根据命令来处理数据流中的数据，通过多种转换修改流经它的文本，这些命令要么从命令行中输入，要么存储在一个命令文本文件中。

sed是一个面向字符流的非交互式编辑器，也就是说 sed 不允许用户与它进行交互操作。

二、sed工作流程

1.读取
sed从输入流（文件、管道、标准输入）中读取一行内容并存储到临时的内存缓冲区中（又称模式空间，pattern space)。

2.执行
默认情况下，所有的sed命令都在模式空间中顺序地执行，除非指定了行的地址，否则sed命令将会在所有的行上依次执行。

3.显示
发送修改后的内容到输出流。在发送数据后，模式空间将会被清空。在所有的文件内容都被处理完成之前，上述过程将重复执行，直至所有内容被处理完。

注：默认情况下所有的sed命令都是在模式空间内执行的，不会影响到文件中的内容，除非是用重定向输出到文件或使用-i选项。

三、sed命令

sed [选项] 操作 文件名…

常用选项
在这里插入图片描述
常用操作
在这里插入图片描述

执行多个操作的方法

  • sed -e ‘操作1’ -e ‘操作2’ … 文件名
  • sed -e ‘操作1;操作2;…’ 文件名

四、sed命令的使用

1.sed打印文件内容（p）

（1）打印文件所有行

    sed本身有执行操作后自动打印的效果，-n禁用，p操作也可以打印，并且可以限定条件

sed ’ ’ 文件名
sed -n ‘p’ 文件名

//使用sed自动打印
[root@localhost1 sedtest]#sed '' file1
one
two
three
four
five
six
seven
eight
nine
ten
 
//使用sed的p操作打印
[root@localhost1 sedtest]#sed -n 'p' file1
one
two
three
four
five
six
seven
eight
nine
ten

（2）打印文件指定行

sed -n ‘指定条件p’ 文件名
sed -n ‘/字符串或正则表达式/p’ 文件名

//1.打印指定行（根据行号）
[root@localhost1 sedtest]#sed -n '2p' file1    //打印第2行
two
 
//2.打印指定的多行（根据行号）
[root@localhost1 sedtest]#sed -n '7,$p' file1    //打印从第7行到末尾行
seven
eight
nine
ten
 
//3.打印多行后退出
[root@localhost1 sedtest]#sed '3q' file1    //从头打印3行后退出
one
two
three
 
//4.打印指定行（根据字符串）
[root@localhost1 sedtest]#sed -n '/ve/p' file1    //根据字符串s
five
seven
 
//5.从指定行打印到包含指定字符串的行（根据字符串）    
[root@localhost1 sedtest]#sed -n '7,/nobody/p' /etc/passwd    //打印7到包含nobody的行
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin
 
 
//6.打印奇偶行
[root@localhost1 sedtest]#sed -n 'n;p' file1    //n表示跳到下一行，先n实现输出偶数行
two
four
six
eight
ten
[root@localhost1 sedtest]#sed -n 'p;n' file1    //后n实现奇数行
one
three
five
seven
nine
 
//7.正则表达式表示
//根据root开头或包含mail的输出行（包含扩展正则时sed一定需要加-r选项）
[root@localhost1 sedtest]#sed -nr '/^root|mail/p' /etc/passwd
root:x:0:0:root:/root:/bin/bash
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
 
//从第8行打印到包含（r 至少有一个a t）的字符串的行
[root@localhost1 sedtest]#sed -nr '8,/ra{1,}t/p' /etc/passwd
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin

2.sed增加、插入、替换行（a、i、c）

(1）a操作在指定行下增加行内容

sed ‘指定行范围a 指定内容’ 文件名

//指定第2行下增加行内容
[root@localhost1 ~]#sed '2a ABC' file1
One Two Three
Four Five Six
ABC
Seven Eight Nine
Ten Eleven Twelve
 
//指定2到4行每行下增加行内容
[root@localhost1 ~]#sed '2,4a ABC' file1
One Two Three
Four Five Six
ABC
Seven Eight Nine
ABC
Ten Eleven Twelve
ABC

(2）i操作在指定行上插入行内容

sed ‘指定行范围i 指定内容’ 文件名

//指定第2行上插入行内容
[root@localhost1 ~]#sed '2i ABC' file1
One Two Three
ABC
Four Five Six
Seven Eight Nine
Ten Eleven Twelve
 
//指定第1到3行上插入行内容
[root@localhost1 ~]#sed '1,3i ABC' file1
ABC
One Two Three
ABC
Four Five Six
ABC
Seven Eight Nine
Ten Eleven Twelve

(3）c操作指定行替换为一行内容

sed ‘指定行范围c 指定内容’ 文件名

//指定第3行替换为指定行内容
[root@localhost1 ~]#sed '3c ABC' file1
One Two Three
Four Five Six
ABC
Ten Eleven Twelve
 
//指定第3到4行替换为指定行内容（多行变为一行）
[root@localhost1 ~]#sed '3,4c ABC' file1
One Two Three
Four Five Six
ABC
 
//指定包含ve的行替换为指定行内容
[root@localhost1 ~]#sed '/ve/c ABC' file1
One Two Three
ABC
ABC
ABC

3.sed删除文件内容（d）

sed ‘指定条件d’ 文件名
sed ‘/字符串或正则表达式/d’ 文件名

//1.删除所有行（根据行号）
[root@localhost1 sedtest]#sed 'd' file1
 
//2.删除指定行（根据行号）
[root@localhost1 sedtest]#sed '1d' file1    //删除第1行
two
three
four
five
six
seven
eight
nine
ten
 
//3.删除指定的多行（根据行号）
[root@localhost1 sedtest]#sed '2,8d' file1    //删除2到8行
one
nine
ten
 
//4.删除空行
[root@localhost1 sedtest]#sed '/^$/d' /etc/fstab
#
# /etc/fstab
# Created by anaconda on Fri Jul 29 21:42:19 2022
#
# Accessible filesystems, by reference, are maintained under '/dev/disk'
# See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info
#
/dev/mapper/centos-root /                       xfs     defaults        0 0
UUID=552d20a1-63f1-4209-af23-7bcdb31d1c84 /boot                   xfs     defaults        0 0
/dev/mapper/centos-swap swap                    swap    defaults        0 0
 
//5.删除指定的多行（根据字符串）
[root@localhost1 sedtest]#sed '/ve/d' file1    //删除包含ve的行
one
two
three
four
six
eight
nine
ten
 
//6.正则表达式表示
//删除结尾为bash或nologin的行
[root@localhost1 sedtest]#sed -r '/bash$|nologin$/d' /etc/passwd
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
 
//7.从包含第1个字符串的行开始删除，到包含第2个字符串的位置停止删除
//（如果找不到第2个字符串的行，则删到最后一行）
[root@localhost1 sedtest]#sed '/one/,/five/d' file1    //从含one的行删到含five的行
six
seven
eight
nine
ten
 
[root@localhost1 sedtest]#sed '/thr/,/no/d' file1    //从含thr的行开始删，匹配不到含no的行，则删到最后
one
two
 
 
//8.反向删除（删除除了包含指定内容的行）
[root@localhost1 sedtest]#sed '/ve/d' file1    //删除除包含ve的行
five
seven

4.sed替换文件内容（s）

sed [选项] ‘行范围 s/旧字符串/新字符串/替换标记’ 文件名

4种替换标记
在这里插入图片描述

//1.不加范围，替换每行查找到的字符串
[root@localhost1 ~]#sed -n 's/root/admin/p' /etc/passwd
admin:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/admin:/sbin/nologin
 
//2.指定范围行，在指定行中替换n次（默认1次）
[root@localhost1 ~]#sed -n '/^root/ s/root/abc/p' /etc/passwd
abc:x:0:0:root:/root:/bin/bash
[root@localhost1 ~]#sed -n '/^root/ s/root/abc/2p' /etc/passwd
root:x:0:0:abc:/root:/bin/bash
 
//3.替换行中所有，使用g
[root@localhost1 ~]#sed -n '/^root/ s/root/abc/gp' /etc/passwd
root:x:0:0:root:/abc:/bin/bash
 
//4.指定行s/^/#/可以实现注释行内容
[root@localhost1 ~]#sed '2 s/^/#/' file1
one two three
#four five six
seven eight nine
ten eleven twelve
 
//5.指定行范围替换
[root@localhost1 ~]#sed '1,3 s/^/#/' file1
#one two three
#four five six
#seven eight nine
ten eleven twelve
 
//指定替换除为空可以实现将指定字符串删除
[root@localhost1 ~]#sed 's/#//' /etc/fstab
 
 /etc/fstab
 Created by anaconda on Fri Jul 29 21:42:19 2022
 
 Accessible filesystems, by reference, are maintained under '/dev/disk'
 See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info
 
/dev/mapper/centos-root /                       xfs     defaults        0 0
UUID=552d20a1-63f1-4209-af23-7bcdb31d1c84 /boot                   xfs     defaults        0 0
/dev/mapper/centos-swap swap                    swap    defaults        0 0

5.sed使用命令文件执行（-f）

//编写文件包含sed的操作
[root@localhost1 ~]#vim script.txt
/^$/d
/e$/ s/^/#/
1,3 s/#//
 
//测试用文件
[root@localhost1 ~]#vim file2
#one
#two
#three
four
five
 
 
six
seven
eight
 
nine
ten
 
//sed指定文件操作
[root@localhost1 ~]#sed -f script.txt file2
#one
two
#three
four
five
six
seven
eight
#nine
ten

6.sed直接修改文件内容（-i）

//加-i直接对文件进行操作
[root@localhost1 ~]#sed -i '/swap/ s/^/#/' /etc/fstab
 
//注释文件中包含swap的行
[root@localhost1 ~]#vim /etc/fstab
# /etc/fstab
# Created by anaconda on Fri Jul 29 21:42:19 2022
#
# Accessible filesystems, by reference, are maintained under '/dev/disk'
# See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info
#
/dev/mapper/centos-root /                        xfs     defaults        0 0
UUID=552d20a1-63f1-4209-af23-7bcdb31d1c84 /boot  xfs     defaults        0 0
#/dev/mapper/centos-swap swap                    swap    defaults        0 0

7.sed扩充操作

（1）替换处&代表需要替换内容处中正则表达式的内容

sed [选项] ‘行范围 s/正则表达式/&/替换标记’ 文件名

//这里的&代表.*swap.*匹配到的内容（即包含swap的行内容），在前面加上#可以实现注释行
[root@localhost1 ~]#sed -n 's/.*swap.*/#&/' /etc/fstab
#/dev/mapper/centos-swap swap                    swap    defaults        0 0

(2）替换处\1…\n\ 对应需要替换内容处每个括号中子表达式（可以是字符串和正则）

sed [选项] ‘s/(表达式1)…(表达式n)/\1\2…\n/’ 文件名

//原文件
[root@localhost1 ~]#cat file3
123456abcdef
 
//字符串子表达示，"\数字" 一一对应
[root@localhost1 ~]#sed 's/(123)(456)(abc)/\3\2\1/' file3
abc456123def
 
//正则子表达示，"\数字" 一一对应
[root@localhost1 ~]#sed -r 's/([0-9]{6})([a-z]{6})/\2\1/' file3
abcdef123456

（3）大小写转换

sed ‘s/[a-z]/\u&/g’ 文件名 （原字符范围前\b实现首字母转大写）
sed ‘s/[A-Z]/\l&/g’ 文件名

//原文件
[root@localhost1 ~]#cat file1
one two three
four five six
seven eight nine
ten eleven twelve
 
//1.全部转为大写
[root@localhost1 ~]#sed 's/[a-z]/\u&/g' file1
ONE TWO THREE
FOUR FIVE SIX
SEVEN EIGHT NINE
TEN ELEVEN TWELVE
 
[root@localhost1 ~]#sed -i 's/[a-z]/\u&/g' file1
 
//2.全部转为小写
[root@localhost1 ~]#sed 's/[A-Z]/\l&/g' file1
one two three
four five six
seven eight nine
ten eleven twelve
 
//3.锚定首字母，实现首字母大小写转换
[root@localhost1 ~]#sed 's/\b[a-z]/\u&/g' file1
One Two Three
Four Five Six
Seven Eight Nine
Ten Eleven Twelve

/U/对应子表达式位置数/E （结合第2条操作实现部分转大小写）

//部分转大小写，实现修改文件前缀名小写转大写
[root@localhost1 ~]#ls *.txt | sed -r 's/(.+)(\.txt)/\u\1\E\2/'    //u转开头
Abc.txt
A.txt
B.txt
Efg.txt
Number.txt
Script.txt
 
[root@localhost1 ~]#ls *.txt | sed -r 's/(.+)(\.txt)/\U\1\E\2/'    //U转全部
ABC.txt
A.txt
B.txt
EFG.txt
NUMBER.txt
SCRIPT.txt

（4）将多个文件内容放在一个文件中

sed -i ‘$r 文件1’ 文件2

//往fa、fb文件输入内容
[root@localhost1 ~]#echo 12345678 > fa
[root@localhost1 ~]#echo abcdefgh > fb
 
//合并文件内容到fb文件中
[root@localhost1 ~]#sed -i '$r fa' fb
[root@localhost1 ~]#cat fb
abcdefgh
12345678

（5）复制、剪切粘贴行内容

H 复制 ； G 粘贴

//原文件
[root@localhost1 ~]#cat file2
zhang san
li si
wang wu
zhao liu
qian qi
zhu ba
 
//1.复制粘贴到末尾
[root@localhost1 ~]#sed '1,2H;$G' file2
zhang san
li si
wang wu
zhao liu
qian qi
zhu ba
 
zhang san
li si
 
//2.剪切粘贴到末尾
[root@localhost1 ~]#sed '1,2{H;d};$G' file2
wang wu
zhao liu
qian qi
zhu ba
 
zhang san
li si
与晚风相拥
关注
  • 1
    点赞
  • 踩
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Shell文本处理三剑客之sed的使用
01-08
sed 是 stream editor 的缩写，流编辑器，主要用于对标准输出或文件进行处理。 语法： stdout | sed [option] pattern command sed [option] pattern command file1 常用选项（option） # -n 只打印静默模式匹配...
Shell脚本文本三剑客之sed编辑器
wlc1213812138的博客
06-10 1572
sed是一种流编辑器，流编辑器会在编辑器处理数据前基于预先提供的一组规则来编辑数据。sed编辑器可以根据命令来处理数据流中的数据，通过多种转换修改流经它的文本，这些命令要么从命令行中输入，要么存储在一个命令文本文件中。sed是一个面向字符流的非交互式编辑器，也就是说 sed 不允许用户与它进行交互操作。
Shell脚本文本三剑客之awk编辑器
wlc1213812138的博客
06-10 1024
awk是linux的一个强大的命令，具备强大的文本格式化能力，比如对一堆看起来没有什么规律的日志文件，文本文件等，通过awk命令格式化输出为专业的可以做为应用级数据分析的样式。
Shell脚本基础（ 四： sed编辑器）
最新发布
2302_78835233的博客
08-19 1896
Shell脚本基础（ 四： sed编辑器）
shell脚本——流编辑器“三剑客”之sed命令
Axic123的博客
05-12 672
默认情况下，所有的sed命令都在模式空间中顺序的执行，除非指定了行的地址，否则sed命令将会在所有的行上依次执行。注：默认情况下，所有的sed命令都在模式空间内执行的，因此输入的文件并不会发生任何变化，除非是用重定向存储输出。sed编辑器可以根据命令来处理数据流中的数据，这些命令要么从命令行中输入，要么存储在一个命令文本文件中。sed是一种流编辑器，流编辑器会在编辑器处理数据之前基于预先提供的一组规则来编辑数据流。在所有的文件内容都被处理完之前，上述过程将被重复执行，直至所有内容被处理完。
Linux Shell脚本编程－－sed命令详解.zip_shell sed_命令介绍_脚本 shell
09-24
shell编程中经常用到sed命令，本文详细介绍了shell常用命令sed详细用法
SED单行脚本快速参考中文版(Unix 流编辑器)
01-10
英文标题：USEFUL ONE-LINE SCRIPTS FOR SED (Unix stream editor) 原标题：HANDY ONE-LINERS FOR SED (Unix stream editor) 整理：Eric Pement – 电邮：pemente[at]northpark[dot]edu 版本5.5 译者：Joe Hong – ...
shell编程-文本文件处理（grep sed awk文本三剑客）
01-07
以一串字符作为表达式向系统传达意思（过滤匹配数据），元字符是描述字符的字符，正则表达式是有一串字符和元字符构成的字符串，主要功能为文本查询和字符串操作，匹配文本 大部分linux只支持基本的正则表达式。 hel...
Shell与vim编辑器
net的博客
02-02 756
shell（即：Linux shell）shell脚本业界所说的 shell 通常都是指 shell 脚本，但读者朋友要知道，shell 和 shell script 是两个不同的概念。
【简单认识shell脚本sed编辑器】
qq_67633755的博客
06-12 160
sed是一种流编辑器，流编辑器会在编辑器处理数据前基于预先提供的一组规则来编辑数据。sed编辑器可以根据命令来处理数据流中的数据，通过多种转换修改流经它的文本，这些命令要么从命令行中输入，要么存储在一个命令文本文件中。sed是一个面向字符流的非交互式编辑器，也就是说 sed 不允许用户与它进行交互操作。
Shell sed编辑器
qq_45303986的博客
09-20 1503
sed编辑器被称作流编辑器（stream editor），和普通的交互式文本编辑器恰好相反。选项允许修改sed命令的行为选项：使用方法：例子：在一个文件输入以下内容 注意：这样使用并不会修改原文件内容，它只会将修改后的数据发送到STDOUT使用多个编辑命令时，需要使用 -e 选项两个命令都作用到文件中的每行数据上。命令之间必须用分号隔开，并且在命令末尾和分号之间不能有空格。注意：命令行要在封尾单引号所在行结束命令 或者使用另一种格式：（进入sed编辑器命令列表）需要使用 -f 来指定文件（s
使用vim编辑器编写shell脚本
qq_45364825的博客
05-17 1105
本次内容主要讲述怎么用vim编辑器编写shell脚本
shell编程之sed编辑器
nwp0611的博客
05-16 374
sed是一种在线编辑器，它一次处理一行内容。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有改变，除非你使用重定向存储输出。sed主要用来自动编辑一个或多个文件；简化对文件的反复操作；编写转换程序等。
【Linux】shell编程—awk编辑器
h15162064289的博客
05-22 784
awk编辑器
sed编辑器
weixin_53496478的博客
03-17 290
sed编辑器1、sed编辑器2、sed工作流程3、命令格式4、常用选项5、常用操作6、使用地址7、删除8、替换9、插入 1、sed编辑器 sed是一种流编辑器，流编辑器会在编辑器处理数据之前基于预先提供的一组规则来编辑数据流 sed编辑器可以根据命令来处理数据流中的数据，这些命令要么从命令行中输入，要么存储在一个命令文本文件中 2、sed工作流程 sed 的工作流程主要包括读取、执行和显示三个过程 读取：sed 从输入流（文件、管道、标准输入）中读取一行内容 并存储到临时的缓冲区中（又称模式空间，pa
Vim编辑器与Shell命令脚本
小菜鸟
07-13 3299
1  Vim文本编辑器如何使用Vim编辑器来编写、修改文档，然后通过逐个配置主机名称、系统网卡以及Yum软件仓库参数文件等在Linux系统中一切都是文件，而配置一个服务就是在修改其配置文件的参数”。而且在日常工作中大家也肯定免不了要编写文档，这些工作都是通过文本编辑器来完成的.Vim之所以能得到广大厂商与用户的认可，原因在于Vim编辑器中设置了三种模式—命令模式、末行模式和编辑模式，每种模式分别又...
Shell常用文本编辑工具（1）
敖进个人博客
09-10 4936
首先安利一下吴军老师的新书《格局》，吴军老师的每一本书真的都不错！书一到就立马打开读了起来，最喜欢其中一句：获得偶然的成功并不难，难的是逐渐让成功从偶然变成必然！加油！！ 1、cut工具 cut的工作就是“剪”，具体的说就是在文件中负责剪切数据用的。cut 命令从文件的每一行剪切字节、字符和字段并将这些字节、字符和字段输出。 1.1 基本用法 cut [选项参数] filename 说...
Linux就该这么学 笔记（三）Vim编辑器与Shell命令脚本
weixin_46915638的博客
05-11 876
在 crond 服务的配置参数中，一般会像 Shell 脚本那样以#号开头写上注释信息，这样 在日后回顾这段命令代码时可以快速了解其功能、需求以及编写人员等重要信息。⭐️尤其 需要注意的是，在 crond 服务的计划任务参数中，所有命令一定要用绝对路径的方式来写。” 需要注意的是，如果有些字段 没有被设置，则需要使用星号（ ）占位。计划任务中的“分”字段必须有数值，绝对不能为空或是*号，而“日”和“星期” 字段不能同时使用，否则就会发生冲突。$1、$2、$3……对应的是显示上一次命令的执行返回值。
shell语句中的sed命令依照脚本的指令来处理编辑文本文件
06-13
`script`是sed命令的编辑脚本，用于指定对输入文本的操作，例如`s/old/new/g`表示将输入文本中的`old`替换为`new`；`input_file`是输入文件名，用于指定要进行操作的文件；`> output_file`表示将输出结果重定向到...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值