Ubuntu小技巧14--sed命令详解

最新推荐文章于 2024-03-14 23:23:06 发布
最新推荐文章于 2024-03-14 23:23:06 发布
阅读量1k 收藏 9
点赞数 2
分类专栏： Linux基础操作及使用技巧 文章标签： sed shell
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u011127242/article/details/104332442
版权

Ubuntu小技巧14--sed命令详解

1 sed 简介

Sed是一个简化的非交互式编辑器，它是linux下三大文本处理工具之一(另外两个为grep awk)。 它允许你执行可在vi和ex编辑器使用的相同类型的编辑任务。 sed程序并不是与编辑器交互工作，而是在命令行键入编辑命令、命名文件，然后在屏幕上查看编辑命令的输出。 sed编辑器是非破坏性的，除非使用shell重定向保存输出，否则它不会更改执行操作的文件。 默认情况下，所有行都打印在屏幕上。

工作模式：
sed编辑器一次处理一行文件（或输入）并将其输出发送到屏幕。 它的相关命令我们可以从vi和ed/ex编辑器看到一些类似的用法。 Sed将当前正在处理的行存储在称为模式空间或临时缓冲区的临时缓冲区中，一旦sed完成对模式空间中行的处理（即，在该行上执行sed命令），模式空间中的行就会被输出到屏幕（除非命令是删除行或禁止其打印）。 处理完行后，将其从模式空间中删除，然后将下一行读入模式空间中进行处理并显示。 当处理完输入文件的最后一行时，Sed就结束了。 Sed通过将每一行存储在临时缓冲区中并在该行上执行编辑，该方法使得原始文件永远不会被更改或销毁。其原理如下图所示：
sed工作原理
使用格式：sed [OPTION]… {script-only-if-no-other-script} [input-file]…

与grep一样，Sed可以使用正则表达式来完成文本处理，正则表达式是用正斜杠包含的字符模式，主要用于搜索和替换。
方法：sed -n ‘/RE/p’ filename
示例１.1：sed -n ‘/love/p’ datafile
说明：输出包含love的行，注意此处p表示输出，不可缺少

方法：sed -n ‘s/RE/replacement string/p’ filename
示例1.2：sed -n ‘s/love/like/p’ datafile
说明：将包含love的行替换为like，注意此处的s不可少，缺少p后无输出

2 正则表达式通配符

以下为sed中常用正则的标志和功能，以及案例说明：

MetacharacterFunctionExampleWhat It Matches
^起始行/^love/匹配所有以love开头的行
$结尾行/love$/匹配所有以love结尾的行
.匹配一个字符，单不是换行符/l…e/匹配包括Ixxe的所有行，xx为任意两个字符
*匹配0或者多个字符/ *love/匹配包含0或者多个字符的行，且结尾为love，注意: *love 中 *前面有个空格
[ ]匹配一个在集合中的字符/[Ll]ove/匹配到包括Love或者love的行
[^ ]匹配一个字符不在集合中/[^A–KM–Z]ove/匹配不包括A-K和MZ切接着为ove的行
(…)保存匹配到的字符s/(love)able/\1er/标记部分内容到tag1中(最多有9个tag)，以便于后续使用，例如此处将love标记为tag1，后续可以通过\1来表示love；将loveable替换为lover，其中\1即为love
&保存搜索的字符串，以便于在替换的时候使用s/love/**&**/保存love, 将 love 替换为 **love**.
<匹配以某个单词开头/<love/匹配到包含 一个单词以love开头的行
>匹配以某个单词结尾/love>/匹配到包含 一个单词以love结尾的行
x{m}
x{m,}
x{m,n}		连续重复字符x m次
连续重复字符x 至少m次
连续重复字符x m-n次		/o{5}/
/o{5,}/
/o{5,10}/		匹配到 连续出现5次o的行
匹配到 连续出现至少5次o的行
匹配到 连续出现5-10次o的行
…

3 命令选项

3.1 命令

CommandFunction
a\追加1或者多行文本到当前行
c\使用新的文本内容替换当前行
d删除行
i\在当前行之前插入文本
h将模式空间的内容复制到缓存空间
H将模式空间的内容追加到缓存空间
g获取缓存空间的内容，并将其复制到模式空间（覆盖模式空间的内容）
G获取缓存空间的内容，并将其复制到模式空间（追加到模式空间）
l列出非打印字符
p按行输出
n读取下一行，并且用n对应命令处理新行内容(而不是用老方法处理新行内容)
q退出sed命令
r从文件读出多行数据
!除选择的内容外，应用该命令到所有的行
s替换字符串
Substitution Flags
g在行上进行全局替换(默认替换只进行一行，加了g后可以对所有行进行替换)
p输出选中行对应的数据
w将匹配的行写到指定文件中
x交换缓存空间和模式空间中的内容
y转换一个字符为另外一个字符，例如 y/ab/AB 将a转为A，b转为B(cannot use regular expression metacharacters with y)

示例3.1.1 ：sed ‘2,5d’ myfile
说明：删除2-5行数据，即输出不包含2-5行的所有数据

3.2 选项

OptionsFunction
–e增加一个可执行的脚本
–f将脚本的内容添加到要执行的命令
–n禁止默认输出

-n 和p结合可以输出；单独-n无p就没有输出；
示例3.2.1：sed -n -f f.txt datafile
其中，f.txt 内容为 /dog$/p，其等价为sed -n ‘/dog$/p’ datafile
说明：输出以dog结尾的行。

3.3 举例

datafile内容：

northwest   NW  Charles Main        3.0 .98 3   34
western     WE  Sharon  Gray        5.3 .97 5   23  
southwest   SW  Lewis   Dalsass     2.7 .8  2   18
southern    SO  Suan    Chin        5.1 .95 4   15
southeast   SE  Patricia Hemenway   4.0 .7  4   17
eastern     EA  TB      Savage      4.4 .84 5   20  
northeast   NE  AM      Main Jr.    5.1 .94 3   13
north       NO  Margot  Weber       4.5 .89 5   9
central     CT  Ann     Stephens    5.7 .94 5   13

示例３.3.1: sed ‘/north/p’ datafile
说明：逐行输出所有内容，包含该north的会重复输出
结果：

northwest   NW  Charles Main        3.0 .98 3   34
northwest   NW  Charles Main        3.0 .98 3   34
western     WE  Sharon  Gray        5.3 .97 5   23  
southwest   SW  Lewis   Dalsass     2.7 .8  2   18
southern    SO  Suan    Chin        5.1 .95 4   15
southeast   SE  Patricia Hemenway   4.0 .7  4   17
eastern     EA  TB      Savage      4.4 .84 5   20  
northeast   NE  AM      Main Jr.    5.1 .94 3   13
northeast   NE  AM      Main Jr.    5.1 .94 3   13
north       NO  Margot  Weber       4.5 .89 5   9
north       NO  Margot  Weber       4.5 .89 5   9
central     CT  Ann     Stephens    5.7 .94 5   13

示例３.3.2: sed -n ‘/north/p’ datafile
说明：只输出包含该north的行
结果：

northwest   NW  Charles Main        3.0 .98 3   34
northeast   NE  AM      Main Jr.    5.1 .94 3   13
north       NO  Margot  Weber       4.5 .89 5   9

示例３.3.3：　sed ‘3d’ datafile
说明：　删除第３行
示例３.3.4： sed ‘3,$d’ datafile
说明：从第３行开始全部删除
结果：

northwest   NW  Charles Main        3.0 .98 3   34
western     WE  Sharon  Gray        5.3 .97 5   23

示例３.3.5：　sed ‘$d’ datafile
说明：　删除最后一行
示例３.3.6：　sed ‘/[WSN]E/d’ datafile
说明：　删除匹配到ＷＥ|SE|NE的行
结果：

northwest   NW  Charles Main        3.0 .98 3   34
southwest   SW  Lewis   Dalsass     2.7 .8  2   18
southern    SO  Suan    Chin        5.1 .95 4   15
eastern     EA  TB      Savage      4.4 .84 5   20  
north       NO  Margot  Weber       4.5 .89 5   9
central     CT  Ann     Stephens    5.7 .94 5   13

示例３.3.7： sed -n ‘s/^west/north/p’ datafile
说明：匹配到west开头的行，并将west替换为north，然后输出
结果：

northern     WE  Sharon  Gray        5.3 .97 5   23

示例3.3.8： sed ‘s/[0-9][5-9]$/&.5/’ datafile
说明：匹配最后两个为数组，切最后一个在5-9之间的，在这样的行后追加 .5
结果：

northwest   NW  Charles Main        3.0 .98 3   34
western     WE  Sharon  Gray        5.3 .97 5   23  
southwest   SW  Lewis   Dalsass     2.7 .8  2   18.5
southern    SO  Suan    Chin        5.1 .95 4   15.5
southeast   SE  Patricia Hemenway   4.0 .7  4   17.5
eastern     EA  TB      Savage      4.4 .84 5   20  
northeast   NE  AM      Main Jr.    5.1 .94 3   13
north       NO  Margot  Weber       4.5 .89 5   9
central     CT  Ann     Stephens    5.7 .94 5   13

示例3.3.9： sed ‘s/3/88/g’ datafile 等价 sed ‘s#3#88#g’ datafile
说明： 将所有的3替换为88
示例：3.3.10： sed ‘s/3/88/’ datafile 等价 sed ‘s#3#88#’ datafile
说明： 将最后一个3替换为88
示例3.3.11： sed -n ‘5,/^eastern/p’ datafile
说明： 从第5行开始输出，知道出现的第一个eastern的那一行为止，若一直没有easter则从第5行开始全部输出
结果：

southeast   SE  Patricia Hemenway   4.0 .7  4   17
eastern     EA  TB      Savage      4.4 .84 5   20

示例3.3.12： sed -e ‘1,7d’ -e ‘s/Ann/Bnn/’ datafile
说明： 删除1-7行，然后将Ann替换为Bnn，-e表示可以使用多次规则
结果：

north       NO  Margot  Weber       4.5 .89 5   9
central     CT  Bnn     Stephens    5.7 .94 5   13

示例3.3.13： sed ‘/Suan/r newfile’ datafile
说明：读出newfile中的内容，匹配到Suan后将其追加到Suan所在的行后面
示例3.3.14： sed -n ‘/north/w newfile’ datafile
说明： 将匹配到north的行全部输出到newfile中
示例3.3.15： sed '/^north /a\ This is function of a\ ’ datafile
说明： 匹配到north 开头的行，并追加This is function of a
结果：

northwest   NW  Charles Main        3.0 .98 3   34
western     WE  Sharon  Gray        5.3 .97 5   23  
southwest   SW  Lewis   Dalsass     2.7 .8  2   18
southern    SO  Suan    Chin        5.1 .95 4   15
southeast   SE  Patricia Hemenway   4.0 .7  4   17
eastern     EA  TB      Savage      4.4 .84 5   20  
northeast   NE  AM      Main Jr.    5.1 .94 3   13
north       NO  Margot  Weber       4.5 .89 5   9
 This is function of a\ 
central     CT  Ann     Stephens    5.7 .94 5   13

示例3.3.16： sed ‘1,3y/abcdef/ABCDEF/’ datafile
说明： 将 1-3行的abcdef 由小写替换为大写
示例3.3.17： sed ‘/eastern/{ n; s/AM/Archie/; }’ datafile
说明：匹配到eastern后立马处理下一行， 下一行的处理方法为： 将Archie替换为AM
结果：

northwest   NW  Charles Main        3.0 .98 3   34
western     WE  Sharon  Gray        5.3 .97 5   23  
southwest   SW  Lewis   Dalsass     2.7 .8  2   18
southern    SO  Suan    Chin        5.1 .95 4   15
southeast   SE  Patricia Hemenway   4.0 .7  4   17
eastern     EA  TB      Savage      4.4 .84 5   20  
northeast   NE  Archie      Main Jr.    5.1 .94 3   13
north       NO  Margot  Weber       4.5 .89 5   9
central     CT  Ann     Stephens    5.7 .94 5   13

待添加…

4 使用案例及注意事项

4.1 使用案例

后续将在此处逐渐补充一些常用的案例。

  1. 将脚本中sdx1 替换为sdw1
    sed ‘s/sdx1/sdw1/’ -i keeprunning/disk5_keeprunning_v2.sh
    此处需要使用-i，其作用为替换后将内容写回到脚本disk5_keeprunning_v2.sh中；

4.2 注意事项

  1. 通过\c正则内容c 的方式
    方法：sed -n ‘\cREcp’ filename
    说明：其中\c c即为正则表达的起始标志，等价于/ /
    示例4.2.1：sed -n ‘\cdog$cp’ datafile　和　sed -n ‘/dog$/p’ datafile
    说明：\c c 和\ \等价，都是输出以dog结尾的行。

  2. sed ‘s/dog/123/’ datafile 、 sed ‘s/dog/123/p’ datafile 和 sed -n ‘s/dog/123/p’ datafile 的区别
    第一个不会重复全输出，
    第二个全部输出，但是包含dog的行会重复，
    最后一个不重复且只输出包含dog的行；

  3. sed 中使用变量

    vim set_params.sh
sed -i "s/build_docker_env/$3/g" -i ./shell_paras.txt
该方法将 shell_paras.txt 中的 build_docker_env 替换为$3 所对应的变量

    使用变量的试试需要使用双引号，否则变量$3不生效

5 说明

测试系统版本：Ubuntu 1910 SERVER (64-bit)
参考文献： UNIX® Shells by Example Fourth Edition By Ellie Quigley

昕光xg
关注
  • 2
    点赞
  • 踩
  • 9
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
Ubuntu 常用命令之 sed 命令用法介绍
dyy123
12-19 454
文章解释并演示了ubuntu系统下，命令sed的用法
ubuntu中sed命令用法
weixin_58036810的博客
01-15 502
4.sed -i ‘1d’ passwd：真正的删除第一行，如果不加i的话只是在预览的时候不显示而已，其实文件里还是存在第一行的。1.sed ‘1p’ passwd ：打印第一行内容，改为sed -n ‘1p’ passwd 只显示第一行。8.sed -i 's/root/Root/' passwd：其中s是替换操作，将root替换成Root。sed -i 's/root/Root/g' passwd，即替换成功。2.sed -n ‘1，4p’ passwd：打印第一行到第四行。
Linux之Sed命令详解(总结一些实用例子)
weixin_33752045的博客
05-06 296
简介 sed 是一种在线编辑器，它一次处理一行内容。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有 改变，除非你使用重定向存储输出。Sed主要用来自动编辑一个或多个文件；简化对文件的反复操作；编写转换程序等。   sed...
ubuntu下sed命令详解
qq_39507939的博客
04-28 2053
sed简介 sed是一种非交互式的流编辑器，可动态编辑文件。所谓非交互式是说，sed和传统的文本编辑器不同，并非和使用者直接互动，sed处理的对象是文件的数据流（称为stream/流）。 sed的工作模式是，比对每一数据行，若符合样式，就执行指定的操作。 sed --version //查看sed版本 sed语法 sed ‘操作命令’ 操作对象 特别注意：sed并不会更改文件内容。sed的工作方式是读取文件内容，经流编辑之后，把结果显示到标准输出。因此，如果想要存储sed的处理结果，得自
ubuntu(20.04)-shell脚本（3）-sed-mysqldump
aggie4628的专栏
04-18 866
cmd： sed +选项 ‘指令’ 文件sed指令保存到文件中：sed +选项 -f 包含sed指令的文件 文件-r：使用扩展正则表达式-e：它告诉sed将下一个参数解释为一个sed指令，只有当命令行上给出多个sed指令时才需要使用-e选项-f：后跟保存了sed指令的文件-i：直接对内容进行修改，不加-i时默认只是预览，不会对文件做实际修改-n：取消默认输出，sed默认会输出所有文本内容，使用-n参数后只显示处理过的行a:追加 向匹配行后面插入内容。
Linux Shell脚本编程－－sed命令详解.zip_shell sed_命令介绍_脚本 shell
09-24
本文将深入讲解`sed`命令的基本概念、功能以及在Shell脚本中的具体应用。 `sed`是一种非交互式的文本处理工具，它可以从标准输入读取数据，对数据进行处理，然后将结果输出到标准输出。`sed`的强大之处在于它可以...
linux-Sed命令详解.zip
09-16
在“linux-Sed命令详解”文档中，我们将深入探讨Sed命令的基本用法和高级技巧。 首先，Sed工作基于数据流的概念，它可以读取标准输入或者指定文件的内容，按照指定的命令对每一行进行处理，然后将结果输出到标准...
linux中sed命令的使用与注意小结
01-20
处理时，把当前处理的行存储在临时缓冲区中，称为『模式空间』（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并...
sed-4.2.1.rar包括sed-4.2.1-setup.exe、sed-4.2.1-dep.zip、sed-4.2.1-bin.zip
08-27
在Windows环境下，用户安装`sed-4.2.1-setup.exe`后，可以直接在命令行使用`sed`命令。而在Linux或Unix系统中，通常需要通过包管理器安装`sed`。使用时，用户通常会输入类似`sed 's/old/new/g' input.txt > output....
Shell编程-字符截取命令-sed命令
08-21
Shell编程-字符截取命令-sed命令
【Linux】文本替换Ubuntu 中 sed 指令的使用指南
最新发布
2333333
03-14 740
没什么 大愿望没有什么事 要赶看见路口红灯 一直闪它像 眨眼的小太阳乌云还 挺大胆顶在头上 吹不散我抓在手里 捏成棉花糖什么烦恼 不能忘既然 是路一定有转弯哪个风景 都漂亮🎵 周深《小美满》在 Ubuntu（或其他类 Unix/Linux 系统）中，sed 是一种强大的文本处理工具，用于对文本进行替换、删除、插入等操作。本指南将介绍 sed 指令的基本用法以及一些常见的应用场景。
ubuntu(22.04)--常用命令（2）-awk-sed-find-cut-xargs-grep-curl-tee-wc-sort
aggie4628的专栏
05-04 1883
它逐行处理数据，特别适用于从文件中提取特定的数据。例如，您可以使用以下命令从CSV文件中提取数据的第一列：7. 内置变量awk ‘END{print “文件名是 “, FILENAME, “有”, NF, “个字段和”, NR, “个记录”}’ linuxmi.txt记录中的默认分隔符通常为空格；如果有逗号“，”或点“。”作为字段分隔符，然后将“ FS”选项与分隔符一起使用。我们再来看一个文件，其中的数据字段之间用逗号“：”隔开：RS9.
ubuntu17.04关于sed命令行的困扰
MisshqZzz的博客
01-09 978
今天在ubuntu17.04版本的虚拟机上使用sed命令替换文本文件中的字符时，使用变量一直无法替换，经过反复测试之后才成功。把测试过程写一下备份。第一种情况：替换后的文件格式：第二种情况：替换后的文件格式：第三种情况：替换后的文件格式：由此可见，第三种方法中的两种表达方式都是正确的，在ubuntu17.04版本的linux中，当需要使用sed命令替换变量时，应该使用如下方式：sed -i s/x...
ubuntu使用sed替换/查找文件中的内容，使用grep查找包含指定内容的多个文件
奔跑的菜鸡
08-16 7274
sed
ubuntu下sed编辑器的简单使用
~~~~~~常思~~~~~
11-03 2641
sed编辑器被称做流编辑器（stream  editor），根普通交互式文本编辑器恰好相反。在交互式文本编辑器中（eg：Vim），可以使用键盘命令来交互式地插入  删除 或者替换数据中的文本。流编辑器则会在编辑器处理数据之前基于预先提供的一组规则来编辑数据流。 sed命令 格式：sed options script file 1.在命令行定义编辑器命令 eg：echo "This
Linux sed命令的用法介绍
热门推荐
落尘纷扰的专栏
01-02 1万+
sed命令简介 sed是非交互式的编辑器。它不会修改文件，除非使用shell重定向来保存结果。默认情况下，所有的输出行都被打印到屏幕上。 sed编辑器逐行处理文件（或输入），并将结果发送到屏幕。具体过程如下：首先sed把当前正在处理的行保存在一个临时缓存区中（也称为模式空间），然后处理临时缓冲区中的行，完成后把该行发送到屏幕上。sed每处理完一行就将其从临时缓冲区删除，然后将下一行读入，进行处
Linux学习4 yum仓库 编译安装 sed基本用法
缺一的博客
07-24 1106
1、yum配置多个网络源 2、yum配置本地局域网私有源仓库 3、编译安装http2.4版本 3、利用sed 取出ifconfig命令中本机的IPv4地址 4、删除/etc/fstab文件中所有以#开头 5、处理/etc/fstab路径,使用sed命令取出其目录名和基名 6、列出ubuntu软件管理工具apt的一些用法 7、ubuntu建议安装的常用包...
sed -i命令详解
10-14
sed -i命令是用于在文件中进行文本替换的命令，其中-i选项表示直接修改原文件，而不是输出到终端。具体用法如下： ``` sed -i 's/old/new/g' file.txt ``` 其中，s表示替换操作，old表示要被替换的文本，new表示替换后的文本，g表示全局替换，file.txt表示要进行替换的文件名。 举个例子，如果我们要将file.txt中所有的"apple"替换为"orange"，可以使用以下命令： ``` sed -i 's/apple/orange/g' file.txt ``` 这样就会直接修改file.txt文件，将其中所有的"apple"替换为"orange"。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

昕光xg

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值