SHELL 三剑客之一 sed的使用

最新推荐文章于 2024-04-10 10:31:55 发布
最新推荐文章于 2024-04-10 10:31:55 发布
阅读量826 收藏 2
点赞数
分类专栏： linux 文章标签： shell shell脚本 linux sed grep
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_33283716/article/details/80881261
版权

sed介绍

流编辑器，过滤和替换文本。

工作原理：sed 命令将当前处理的行读入模式空间进行处理，处理完把结果输出，并清空模式空间。然后再将下一行读入模式空间进行处理输出，以此类推，直到最后一行。这个流程理解起来非常困难，我认为这是三剑客最难理解的。

Usage: sed [OPTION]... {script-only-if-no-other-script} [input-file]...

sed [选项] '地址 命令' file

选项 描述
-n 不打印模式空间
-e 执行脚本、表达式来处理
-f 脚本文件的内容添加到命令被执行
-i 修改原文件
-r 使用扩展正则表达式
命令 描述
s/regexp/replacement/ 替换字符串
p 打印当前模式空间
P 打印模式空间的第一行
d 删除模式空间，开始下一个循环
D 删除模式空间的第一行，开始下一个循环
= 打印当前行号
a \text 当前行追加文本
i \text 当前行上面插入文本
c \text 所选行替换新文本
q 立即退出 sed 脚本
r 追加文本来自文件
: label label 为 b 和 t 命令
b label 分支到脚本中带有标签的位置，如果分支不存在则分支到脚本的末尾
t label 如果 s///是一个成功的替换，才跳转到标签
h H 复制/追加模式空间到保持空间
g G 复制/追加保持空间到模式空间
x 交换模式空间和保持空间内容
l 列出当前行在
n N 读取/追加下一行输入到模式空间
w filename 写入当前模式空间到文件
& 引用已匹配字符串
地址 描述
first~step 步长，每 step 行，从第 first 开始
$ 匹配最后一行
/regexp/ 正则表达式匹配行
number 只匹配指定行
addr1,addr2 开始匹配 addr1 行开始，直接 addr2 行结束
addr1,+N 从 addr1 行开始，向后的 N 行
addr1,~N 从 addr1 行开始，到 N 行结束
$p 打印最后一行

操作文件

[root@bigdata-sg-a-07]# tail /etc/services
nimgtw          48003/udp               # Nimbus Gateway
3gpp-cbsp       48049/tcp               # 3GPP Cell Broadcast Service Protocol
isnetserv       48128/tcp               # Image Systems Network Services
isnetserv       48128/udp               # Image Systems Network Services
blp5            48129/tcp               # Bloomberg locator
blp5            48129/udp               # Bloomberg locator
com-bardac-dw   48556/tcp               # com-bardac-dw
com-bardac-dw   48556/udp               # com-bardac-dw
iqobject        48619/tcp               # iqobject
iqobject        48619/udp               # iqobject

示例

匹配打印(p)

打印匹配 blp5 开头的行

根据上边那个"sed [选项] '地址 命令' file"的使用方式,-n为选项，这里没有用到地址，默认就是每行读入模式空间，然后在模式空间中执行的命令为"/^blp5/"正则匹配模式空间中的内容时候能匹配到"^blp5"，然后通过p打印当前模式空间

[root@bigdata-sg-a-07]# tail /etc/services |sed -n '/^blp5/p'
blp5            48129/tcp               # Bloomberg locator
blp5            48129/udp               # Bloomberg locator

如果不加-n选项，就会把所有读入模式空间的内容也输出一下,可以看一下

[root@bigdata-sg-a-07]# tail /etc/services |sed '/^blp5/p'
nimgtw          48003/udp               # Nimbus Gateway
3gpp-cbsp       48049/tcp               # 3GPP Cell Broadcast Service Protocol
isnetserv       48128/tcp               # Image Systems Network Services
isnetserv       48128/udp               # Image Systems Network Services
blp5            48129/tcp               # Bloomberg locator
blp5            48129/tcp               # Bloomberg locator
blp5            48129/udp               # Bloomberg locator
blp5            48129/udp               # Bloomberg locator
com-bardac-dw   48556/tcp               # com-bardac-dw
com-bardac-dw   48556/udp               # com-bardac-dw
iqobject        48619/tcp               # iqobject
iqobject        48619/udp               # iqobject

可以看到'blp5 48129/tcp # Bloomberg locator'连续打印了两次，一次是模式空间中的，一次是通过p命令输出的。 我们可以通过sedsed来看一下这个流程

[root@bigdata-sg-a-07]# tail /etc/services |./sedsed -d -n '/^blp5/p'
PATT:nimgtw          48003/udp               # Nimbus Gateway$
HOLD:$
COMM:/^blp5/ p
PATT:nimgtw          48003/udp               # Nimbus Gateway$
HOLD:$
省略部分
PATT:blp5            48129/udp               # Bloomberg locator$
HOLD:$
COMM:/^blp5/ p
blp5            48129/udp               # Bloomberg locator
PATT:blp5            48129/udp               # Bloomberg locator$
HOLD:$
省略部分

nimgtw 48003/udp # Nimbus Gateway$模式空间在读入执行"/^blp5/ p"匹配并输出并没有什么结果 而blp5 48129/udp # Bloomberg locator$模式空间在读入执行"/^blp5/ p"匹配并输出后输出了blp5 48129/udp # Bloomberg locator

sedsed是用于sed命令debug的好工具，通过python编写，主页在http://sedsed.sourceforge.net 我们这边只说明-d参数的debug模式，还有indent、htmlize、tokenize等。

PATT：代表 读入新的一行时模式空间中的内容 HOLD：代表 读入新的一行时保持空间中的内容 COMM: 表示将要执行的命令 执行结果，这一行在执行完成后如果有就显示，如果没有就直接显示PATT PATT：代表 执行完命令后模式空间中的内容 HOLD：代表 执行完命令后保持空间中的内容

后边设计新的选项，地址和命令会继续通过这种方式来分析。

打印第一行

1为number，指匹配第一行

[root@bigdata-sg-a-07]# tail /etc/services |sed -n '1p'
nimgtw          48003/udp               # Nimbus Gateway
打印第一行至第三行

1,3为addr1，addr2，代表第一行到第三行

[root@bigdata-sg-a-07]# tail /etc/services |sed -n '1,3p'
nimgtw          48003/udp               # Nimbus Gateway
3gpp-cbsp       48049/tcp               # 3GPP Cell Broadcast Service Protocol
isnetserv       48128/tcp               # Image Systems Network Services
打印奇数行

1~2为first~step，从第一行开始，步长为2

[root@bigdata-sg-a-07 ~]# seq 10 |sed -n '1~2p'
1
3
5
7
9
打印匹配行及后一行
[root@bigdata-sg-a-07 ~]# tail /etc/services |sed -n '/nimgtw/,+1p'
nimgtw          48003/udp               # Nimbus Gateway
3gpp-cbsp       48049/tcp               # 3GPP Cell Broadcast Service Protocol
打印最后一行
[root@bigdata-sg-a-07 ~]# tail /etc/services |sed -n '$p'
iqobject        48619/udp               # iqobject
不打印最后一行

感叹号也就是对后面的命令取反

[root@bigdata-sg-a-07 ~]# tail /etc/services |sed -n '$!p'
nimgtw          48003/udp               # Nimbus Gateway
3gpp-cbsp       48049/tcp               # 3GPP Cell Broadcast Service Protocol
isnetserv       48128/tcp               # Image Systems Network Services
isnetserv       48128/udp               # Image Systems Network Services
blp5            48129/tcp               # Bloomberg locator
blp5            48129/udp               # Bloomberg locator
com-bardac-dw   48556/tcp               # com-bardac-dw
com-bardac-dw   48556/udp               # com-bardac-dw
iqobject        48619/tcp               # iqobject
匹配范围，以逗号分开两个样式选择某个范围
[root@bigdata-sg-a-07 ~]# tail /etc/services |sed -n '/^blp5/,/^com/p'
blp5            48129/tcp               # Bloomberg locator
blp5            48129/udp               # Bloomberg locator
com-bardac-dw   48556/tcp
最低0.47元/天 解锁文章
酱g
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
Shell文本处理三剑客之sed的使用
01-08
sed 是 stream editor 的缩写，流编辑器，主要用于对标准输出或文件进行处理。 语法： stdout | sed [option] pattern command sed [option] pattern command file1 常用选项（option） # -n 只打印静默模式匹配...
shell脚本-正则、grep、sed、awk三剑客
12-16
在企业工作中，每天做的Linux运维工作中，时刻都会面对大量带有字符串的文本配置、程序、命令输出及日志文件等，而我们经常会有迫切的需要，从大量的字符串内容中查找符合工作需要的特定字符串。...
Linux命令之sed
weixin_44405218的博客
08-19 1777
sed -ir ‘/^H+/a 11111111111’ /etc/sysconfig/network #-i选项后面的字符被当做是备份文件的后缀。sed ‘/id:/c id:5:initdefault:’ /etc/inittab #将id:所在的行整行替换成后面的字符串。sed -n ‘s/root/ROOT/2p’ /etc/passwd #将文件中每行的第2个root替换为ROOT。sed -n ‘2,10s/^/#/p’ /etc/passwd #在2到10行前面加上注释。......
Shell脚本：让你一次了解sed编辑器的操作规范
萧碧宰治的博客
05-26 339
目 录一、sed编辑器介绍①sed编辑器的工作流程②sed命令的具体格式 一、sed编辑器介绍 sed是一种流编辑器，流编辑器会在编辑器处理数据之前基于预先提供的一组规则来编辑数据流。 ①sed编辑器的工作流程 sed编辑器可以根据命令来处理数据流中的数据，这些命令要么从命令行中输入，要么存储在一个命令文本文件中。 sed的工作流程主要包括读取、执行和显示三个过程: 读取: sed从输入流 (文件、管道、标准输入) 中读取一行内容并存储到临时的缓冲区中(又称模式空间，pattern space) 执行:默
shell - 07 - Shell文本处理三剑客 - grep，2024年最新快手大数据面试经验
最新发布
2401_84182936的博客
04-10 531
不知道你们用的什么环境，我一般都是用的Python3.6环境和pycharm解释器，没有软件，或者没有资料，没人解答问题，都可以免费领取（包括今天的代码），过几天我还会做个视频教程出来，有需要也可以领取~给大家准备的学习资料包括但不限于：Python 环境、pycharm编辑器/永久激活/翻译插件python 零基础视频教程Python 界面开发实战教程Python 爬虫实战教程Python 数据分析实战教程python 游戏开发实战教程Python 电子书100本。
深入理解sed模式空间——sed ‘n；p‘
m0_56542366的博客
11-04 1236
解释以下命令结果： seq 10 | sed 'n;p' seq 10 |Sed -n 'n;p' seq 10 |sed 'p;n' seq 10 |sed -np;n' 上面四条命令和sed的模式空间密切相关，下面来详细分析
shell系列8-sed
只是甲的博客
04-15 786
文章目录一. sed概述二. sed实例 一. sed概述 sed（stream editor）是流编辑器，可对文本文件和标准输入进行编辑。 sed只是对缓冲区中原始文件的副本进行编辑，并不编辑原始的文件，如果需要保存改动内容，可以选择使用下面两种方法： 重定向 w编辑命令 调用sed有三种方法： 在Shell命令行输入命令调用sed，格式为： sed [选项] ‘sed命令’ 输入文件 将sed命令插入脚本文件后，然后通过sed命令调用它，格式为： sed [选项] -f sed脚本文件 输入文件
Linux sed的基本用法与进阶用法
ck784101777的博客
01-07 2357
sed文本处理工具的用法： 用法1：前置命令 | sed [选项] '条件指令' 如：cat abc.txt | sed -n 1p 用法2：sed [选项] '条件指令' 文件.. .. 如：sed -n 1p abc.txt 相关说明如下： 条件可以是行号或者/正则/ 没有条件时，默认为所有条件 指令可以是增、删、改、查等指令 默认sed会将所有输出的内容都打...
shell编程-文本文件处理（grep sed awk文本三剑客）
01-07
一、grep和正则表达式 1、正则表达式 以一串字符作为表达式向系统传达意思（过滤匹配数据），元字符是描述字符的字符，正则表达式是有一串字符和元字符构成的字符串，主要功能为文本查询和字符串操作，匹配文本 大...
shell三剑客过滤文件内字符串长度输出
01-09
记一次过滤文件内容，三剑客awk、grep、sed过滤指定字段、列后，怎料其中混杂编码字符串，这不是我们想要的。所幸，找到了规律，那就是 它 很长…，直接干掉长字符串即可！ 下边是三把剑具体实现！ 我有三把剑，一把...
shell三剑客
qq_51574197的博客
06-10 549
shell三剑客sedgrepawk sed sed是一种流编辑器，也是文本处理非常好的工具，配合正则使用更加强大处理时，把当前处理的行存储在临时的缓冲区中，称为“模式空间”，接着sed命令处理缓冲区的内容，完成后输出到屏幕，接着处理下一行 常用参数 -e #以指定的指令来处理输入的文本文件 -n #取消默认输出 -h #帮助 -V #显示版本信息 常用命令 a i c d s grep 文本查找或搜索工具 awk ...
学习Linux(必看经典)牛人40天精通Linux运维的学习方法
12-01
如果你，认真学习完，并掌握了本课程，即可掌握企业的实战运维的基本应用技术，自学能力，思考方法，解决手段（不会慌乱了），成为一个优秀的运维工程师，你将会掌握Linux的必备技能，还在等什么，早一秒开始学就早一秒成才！
linux sed 批量替换字符串
weixin_33816946的博客
09-18 416
linux sed 批量替换字符串 本文来自: IT运维专家网 作者: NetSeek 日期: 2009-2-6 15:47 比如，要将目录/modules下面所有文件中的zhangsan都修改成lisi，这样做：sed -i "s/zhangsan/lisi/g" `grep zhangsan -rl /modules`解释一下：-i 表示inplace ed...
sed命令详解
ltochange的博客
08-16 1万+
主要参考： （1）使用sed输出文件的指定行 （2）sed 字符串替换 （3）sed之添加空行 仅供自己学习使用，如有侵权，请联系删除 获取指定的行 （1） 获取test.txt的第二行，输入到屏幕 sed -n 2p test.txt （1） 获取test.txt的第一行至第二行 sed -n 1,2p test.txt # 加不加引号均可 sed -n ‘1,2p’ test.txt （2）获取test.txt的第二行至最后一行 sed -n '2,$p' test.txt # 必须加单引号 （3
sed命令示例详解
helloworld的专栏
10-27 523
sed [OPTION]… {script-only-if-no-other-script} [input-file]… sed：stream editor流编辑器的简称，可以用来过滤和转换文本，以下是一些常用示例。假设，我们有文本file.txt内容如下： 字符替换操作 icbc@ubuntu:~$ sed 's/unix/linux/' file.txt linux is great...
sed -i 命令详解
热门推荐
yn
02-05 6万+
# 对每行匹配到的第一个字符串进行替换 sed -i 's/原字符串/新字符串/' ab.txt # 对全局匹配上的所有字符串进行替换 sed -i 's/原字符串/新字符串/g' ab.txt # 删除所有匹配到字符串的行 sed -i '/匹配字符串/d' ab.txt # 特定字符串的行后插入新行 sed -i '/特定字符串/a 新行字符串' ab.txt # 特定字...
sed命令详解(上)
Robin Hu的专栏
12-13 3208
本文编辑整理自：http://apps.hi.baidu.com/share/detail/35034009 一、简介 sed是一种在线编辑器，它一次处理一行内容。处理时sed会把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space），接着用命令脚本处理缓冲区中的内容，处理完成后把缓冲区的内容输出到屏幕，继续处理下一行，这样不断重复直到文件末尾。这一过程中文件内容并没有
linux sed 命令
linuxarmsummary的专栏
04-15 1万+
======博主所学知识来着于恩师马哥的亲授====== 马哥教育“2014夏令营”开始啦！！！马哥教育是目前性价比最高的Linux培训，国内好评度排名第一，并被网友称为Linux界的"黄埔军校"，全部课程采用Centos6.5x86_64讲解，经过几期网络班的总结和锤炼，逐渐完善的课程体系，学员学习进度监督和优质的考试系统检验学员掌握程度，活跃的在线答疑环节，名师陪伴，牛人指点，精彩不容错
第七章 Shell文本处理三剑客之sed
weixin_33716557的博客
01-05 186
本章大纲：7.2 sed流编辑器，过滤和替换文本。工作原理：sed命令将当前处理的行读入模式空间进行处理，处理完把结果输出，并清空模式空间。然后再将下一行读入模式空间进行处理输出，以此类推，直到最后一行。还有一个空间叫保持空间，又称暂存空间，可以暂时存放一些处理的数据，但不能直接输出，只能放到模式空间输出。这两个空间其实就是在内存中初始化的一个内存区域，存放正在处理的数据和临时存放的数据。Usag...
shell三剑客awk sed grep
02-24
Shell三剑客是指awk、sed和grep，它们是在Unix/Linux系统中非常常用的命令行工具，用于文本处理和数据提取。 1. awk（Aho, Weinberger, and Kernighan）是一种强大的文本处理工具，它可以根据指定的规则对文本进行...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值