三剑客之 sed

最新推荐文章于 2024-06-14 14:37:55 发布
最新推荐文章于 2024-06-14 14:37:55 发布
阅读量145 收藏 1
点赞数
分类专栏： 技术 文章标签： linux 运维
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/s_alted/article/details/127858855
版权

目录


本文参考文献：

sed, a stream editor (gnu.org)

awk 于1977年出生，今年45岁，sed 比 awk 大 2-3 岁（比我大23岁…）

sed全名叫 stream editor，流编辑器，用程序的方式来编辑文本

今天这篇文章主要目的还是为了引起大家对 sed 的兴趣，对于这个上古神器还需要大家自行去查阅相关文档去进一步学习

废话少说，开始今天的 sed 学习之旅吧！

# sed 语法
sed [-nefr] [动作]
-n：只输出匹配到的内容
-e：直接在命令行上进行 sed 的动作
-f：将执行 sed 后的结果重定向到一个文件里，f filename 則可以执行 filename 內的 sed 动作
-r：支持扩展正则表达式
-i：对文件直接修改，而不是只输出到屏幕

sed 的（动作）

  • a：添加；a 后面可以接字符串，这些字符串会在新的一行出现(目前的下一行)
  • c：替换；c 后面可以接字串，这些字串可以取代 n1,n2 之间的行（替换行）
  • d：删除
  • i：添加；i 的后面可以接字串，而这些字串会在新的一行出现(目前的上一行）
  • p：打印；将某个匹配到的数据印出。通常 p 会与 sed -n 一起出现
  • s：替换；字符串替换

1.替换（s，c）

替换一般涉及到文本内容修改，需要加上 -i 动作

以 test.txt 为例子

root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin

以行为单位的替换

1、将 2 到 5 行的内容替换成 ”NO 2-5 NUMBER“

sed -i '2,5c NO 2-5 NUMBER' test.txt

root:x:0:0:root:/root:/bin/bash
NO 2-5 NUMBER
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin

以字符串为单位的替换

sed 's/要被取代的字串/新的字串/g'

PS：加上 p 是指全部替换，不加的话只对第一个匹配到的字符串进行替换，后续的不进行替换

1、将 root 替换成 noroot（非全局替换）

sed -i 's/root/noroot/' test.txt

可以看到只替换了第一个匹配到的 root

noroot:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/noroot:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin

2、将 root 替换成 noroot（全局替换）

sed -i 's/root/noroot/g' test.txt

noroot:x:0:0:noroot:/noroot:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/noroot:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin

3、替换路径

有些内容（比如说文件路径）会有 “/” 符号，这时候我们就需要转义符避免系统识别错误

例如下面一段内容：

cat path.txt
/var/log/app1/app1.log

我们需要将路径中的 /root/log/app1/app1.log 替换成 /home/log/app1/app1.log

方法一：多次替换

sed -i  -e 's/app1/app2/g' -e 's/root/home/g' path.txt

方法二：使用 # 作为分隔符

这样可以避免转义问题

sed -i -e 's#/root/log/app1/app1.log#/home/log/app2/app2.log#' path.txt

方法三：直接使用转义字符（这个看着比较晦涩，个人建议使用方法2）

sed -i  -e 's/\/root\/log\/app1\/app1.log/\/home\/log\/app2\/app2.log/' path.txt

4、将文本中的 Windows 换行符替换成 UNIX 换行符

我们知道，windows 系统的换行符跟 Linux 系统（Unix类系统）的换行符是不一致的

Unix 系统里，每行结尾只有 “<换行>”，即 “\n”；Windows 系统里面，每行结尾是“ <回车><换行>”，即“\r\n”

一个直接后果是，Unix 系统下的文件在 Windows 里打开的话，所有文字会变成一行

而 Windows 里的文件在 Unix 下打开的话，在每行的结尾可能会多出一个 ^M 符号

而我们一般习惯在 windows 系统上面编写脚本编写配置文件再复制粘贴到 Linux 系统上去，如果换行符不对，就极有可能导致出错

所以我们需要将 windows 的换行符替换成 Linux 的换行符

对文件进行 sed 操作（^M 这么敲：Ctrl+v,Ctrl+m）

sed -i 's/^M//g' myfile

2.打印（p）

你可以把这个命令当成grep式的命令

涉及到打印的操作，一般与 -n 参数 搭配

如果不加参数，会是这种效果

sed '/daemon/p' test.txt

root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin

加了 -n 参数，就仅仅只把匹配到的内容输出出来

sed -n '/daemon/p' test.txt

daemon:x:2:2:daemon:/sbin:/sbin/nologin

3.删除（d）

删除匹配到的所在行

不会加 -n ，加了就什么都不输出了

1、删除 daemon 所在行

sed '/daemon/d' test.txt

root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin

2、删除 daemon 和 root 所在行

sed -e '/daemon/d' -e /root/d test.txt

bin:x:1:1:bin:/bin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin

4.添加（a，i）

在当前行的下一行添加

使用 a 动作

1、在文件第四行的下一行添加 newline 字符串（即添加到第五行）

sed -e '4a\newline' test.txt

sed -e '4a newline' test.txt

root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
newline
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin

在当前行的上一行添加

使用 -i 动作

1、在文件第四行的上一行添加 newline 字符串（即添加到第四行，原本第四行的内容变成了第五行）

sed -e '4i newline' test.txt

root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
newline
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin

2、在文件第一行的上一行添加 newline 字符串（即添加到第一行，原本第一行的内容变成了第二行）

sed -e '1i newline' test.txt 

newline
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin
咸鱼Linux运维
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
linux三剑客之sed命令详解
qq_43382735的博客
11-23 1015
linux三剑客之sed命令详解 上篇文章讲的是文本过滤工具grep linux三剑客之grep命令详解，今天继续讲一下linux三剑客之文本编辑工具sed。 sed 是一种新型的，非交互式的编辑器，它能执行与编辑器 vi 相同的编辑任务。sed 编辑器没有提供交互式使用方式，使用者只能在命令行输入编辑命令、指定文件名，然后在屏幕上查看输出。 sed 编辑器没有破坏性，它不会修改源文件，而是将源文件拷贝一份放在操作空间中，然后对操作空间中的副本进行操作，可以使用重定向符号将结果输出到指定文件或者使用-i参数
网络安全三剑客之sed的用法+语法
08-05
网络安全三剑客之sed的用法+语法
linux 三剑客之sed
weixin_42818344的博客
11-12 360
sed是一种流编辑器，它是文本处理中非常中的工具，能够完美的配合正则表达式使用，功能不同凡响。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有 改变，除非你使用重定向存储输出。Sed主要用来自动编辑一个或多个文件；简化对文件的反复操作；编写转换程序等。sed处理文本时以行为单位。
12.Linux三剑客之sed
清风
12-21 489
文件处理三剑客命令之sed命令（重要） 1.sed叫流式编辑器 -r：支持一些扩展的正则表达式 “ ”：两条处理规则，定位+命令 sed -r '' 1.txt：把文件内容打印到屏幕当中去了 行号定位模式： sed -r '2p' 1.txt：把文件内容定位到第二行打印一份出来，在把之前的流出来 sed -r '2d' 1.txt：把文件内容定位到第二行删除，其他保留 sed -r '1c xxx' 1.txt：把第一行内容改变为xxx，输出出来 sed -r '1s/1/6/' 1.txt：把第一行的第
shell脚本三剑客之sed
m0_72359405的博客
07-21 348
sed:类似于vim，就是一个文本编辑器，按行来进行编辑和处理grep sed awk：文本三剑客都是针对文件内容的行来进行处理sed的主要作用就是对文本内容进行增删改查sed可以支持正则表达式，也可以支持扩展正则表达式sed的工作原理：读取，执行，显示三个过程读取：读取文本内容之后，会把读取到的内容存放到临时的缓冲区，又称模式空间执行：在模式空间，根据读取的文本内容，按行执行，除非指定行号，否则会遍历所有行。依次执行，从上往下执行。
文件三剑客之sed详解
人丑就要多读书的博客
07-31 691
文章目录一、什么是sed二、 sed和vim的区别三、作用四、定位五、 查操作六、 删操作七、 增加八、修改文件信息2. 高级信息替换方式：后项引用前项内容 一、什么是sed 字符流过滤编辑和文本字符流转换工具 二、 sed和vim的区别 sed可以把处理文件的规则事先写好，然后用一套规则处理，vim只能一个一个编辑，成批次处理用sed处理比较好 sed处理文件一次内存中只有一行，不会对内存造成过大的压力。 三、作用 作用： 可以直接编辑修改文件内容 可以对文件进行增删改查 语法： sed 参数 "[
三剑客之sed
michael_linux的博客，一个小小小学生。滴水穿石，步步为营，只为那刹那芳华。
11-17 465
官方参考：http://www.gnu.org/software/sed/manual/sed.html 用法： sed [option]... 'script' inputfile 常用选项： -n ：不输出模式空间内容到标准输出。 -e ：多点编辑 -f /path/script_file ：从指定文件中读取编辑脚本 -r ：支持使用扩展正则表达式 i.bak ：备份文件后并在原文件处编辑 script： '地址命令' 地址定界： 1）不给地址：对全文进行处理 2）单地址： n：指定的行，$：最
【Linux】文本处理三剑客之sed
Linux小白一只~正处于学习阶段，觉得我写的还好的请多多给我点赞呀,谢谢大家！！(๑＞ڡ＜)☆
12-17 245
简单来说，sed编辑器是先读取一行到模式空间，再按规则匹配处理，并将结果输出到屏幕上；如果读取的这一行没有做处理也输出到屏幕上，再读取下一行；所以不会修改或破坏原文件。
Linux三剑客之sed
只想整天学习
12-25 205
替换file.txt文件的第二行内容为hello world！，格式为sed -i '2N/^.*$/新内容/' 文件名，N为第N行的内容，也可以通过管道符从标准输入中获取文本内容。 sed -i '2s/^.*$/hello world!/' file.txt #对源文件修改 sed '2s/^.*$/hello world!/' file.txt #不对源文件修改，只打印结果 替换fil...
三剑客之Sed
nmlg6665352的博客
09-14 28
三剑客sed
Shell文本处理三剑客之sed的使用
01-08
sed 是 stream editor 的缩写，流编辑器，主要用于对标准输出或文件进行处理。 语法： stdout | sed [option] pattern command sed [option] pattern command file1 常用选项（option） # -n 只打印静默模式匹配...
linux 文本 处理 三剑客 之 sed 命令
01-07
文章目录1.sed命令的定义2.sed命令选项3.种调用sed的方式3.1 在命令行调用sed3.2 **==-e在一个命令行调用多个编辑器==**3.3 **==-f 在文件中调用编辑器==**3.4 s替换命令3.5脚本替换中的几个替换标记3.5 行寻址3.6 ...
三剑客-sed.txt
02-22
sed基础使用
Linux fallocate工具用于预分配或释放文件空间的块
不积跬步，无以至千里；不积小流，无以成江海。
06-09 302
命令，您需要在具有适当权限的环境中运行它，例如通过SSH登录到Linux服务器或在Linux终端中运行。请确保指定的路径存在且可写。文件中未使用的磁盘空间。请注意，这不会改变文件的大小，只是释放了未使用的磁盘空间。之前，建议了解文件系统和存储设备的特性，以避免潜在的性能问题。是一个Linux命令行工具，用于预分配或释放文件空间的块。文件的大小截断为5MB。大于5MB的部分将被删除。文件的10MB偏移量处开始预分配5MB的磁盘空间。文件的10MB偏移量处开始的5MB磁盘空间。文件预分配10MB的磁盘空间。
嵌入式Linux系统编程 — 3.4 access、chmod和 umask函数修改文件访问权限
几度春风里的博客
06-09 920
文件的权限检查不仅讨论文件本身的权限，还需要涉及到文件所在目录的权限， 只有同时都满足了，才能通过操作系统的权限检查，进而才可以对文件进行相关操作；所以，程序当中对文件进行相关操作之前，需要先检查执行进程的用户是否对该文件拥有相应的权限。需要进行权限检查的文件路径。F_OK：检查文件是否存在R_OK：检查是否拥有读权限W_OK：检查是否拥有写权限X_OK：检查是否拥有执行权限检查项通过则返回 0，表示拥有相应的权限并且文件存在；
Ollama在MacOS、Linux本地部署千问大模型及实现WEB UI访问
最新发布
派大夏的博客
06-14 467
阿里通义千问发布了Qwen2，提供了0.5B～72B的量级模型，在​​Ollama官网​​可以搜索qwen2查看，本文提供了Ollama的下载（在线/离线安装）、Ollama运行模型、使用WebUI连接模型以及页面简单配置。总体还是比较简单的，更高阶的玩法，看小伙伴的反馈，后面更新比如自定义智能体、训练等。
【Linux下的动态链接和静态链接 及 调用libevent库函数的可执行文件无法正常运行情况剖析】
一起学习进步！
06-09 309
静态链接是指在编译时，将程序所依赖的函数或数据直接复制到最终的可执行文件中。这意味着可执行文件包含了程序运行所需的所有代码和数据。动态链接是指在运行时，程序所依赖的函数或数据从外部的共享库（shared library）中加载。这意味着可执行文件只包含了必要的引用信息，而实际的代码和数据则存储在外部的共享库中。
MySQl基础----Linux下搭建mysql软件及登录和基本使用（附实操图超简单一看就会）
溟洵的博客
06-10 755
本章非常基础包括如何在Linux上搭建（==当然上面的SQL语句你在其他能执行SQL语句的软件上也能正常执行，并非一定要在Linux环境下==）和mysql的基本使用
shell三剑客awk sed grep
02-24
Shell三剑客是指awk、sed和grep，它们是在Unix/Linux系统中非常常用的命令行工具，用于文本处理和数据提取。 1. awk（Aho, Weinberger, and Kernighan）是一种强大的文本处理工具，它可以根据指定的规则对文本进行...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

咸鱼Linux运维

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值