shell-----正则表达式之sed

最新推荐文章于 2023-10-16 14:48:44 发布
最新推荐文章于 2023-10-16 14:48:44 发布
阅读量719 收藏 1
点赞数 1
分类专栏： shell
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_42761527/article/details/103365756
版权

一.sed工具概述

  • sed工具是一个强大而简单的文本解析转换工具，可以读取文本，并根据指定的条件对文本内容进行编辑（删除、替换、添加、移动等），最后输出所有行或者仅输出处理的某些行。
  • sed也可以在交互的情况下实现相当复杂的文本处理操作，被应用于shell脚本中，用以完成各种自动化处理任务
  • sed的工作流程主要包括读取、执行和显示三个过程
  • 读取：sed从输入流（文件、管道、标准输入）中读取一行内容并存储到临时的缓冲区（又称为模式空间，pattern space）
  • 执行：默认情况下，所有的sed命令都在模式空间中顺序地执行，除非指定了行的地址，否则sed命令将会在所有的行上依次执行
  • 显示：发送修改后的内容到输出流。再发送数据流，模式空间将会被清空

注：默认情况下，所有的sed命令都是在模式空间执行的，因此输入的文件并不会发生任何变化，除非是用重定向存储输出

二.sed命令常见用法

  • sed命令有两种格式，sed[选项]  ‘操作’   参数  ； sed [选项]  -f scriptfile 参数
  • 其中，“参数”是指操作的目标文件，当存在多个操作对象时用，文件之间用逗号“，”分隔；而scriptfile表示脚本文件，需要用“-f”选项指定，当脚本文件出现在目标文件之前时，表示通过指定的脚本文件来处理输入的目标文件
  • 有如下选项：
  • -e或-expression=：表示用指定命令或者脚本来处理输入的文本文件
  • -f或-file=：表示用指定的脚本文件来处理输入的文本文件
  • -h或-help：显示帮助
  • -n、--quite或silent：表示仅显示处理后的结果
  • -i ：直接编辑文本文件
  • 操作，用于指定具体的动作行为，通常情况下采用”[n1[,n2]]“操作参数的格式。具体如下：
  • a：增加，在当前行下增加一行指定内容
  • c：替换，将选定行替换为指定内容
  • d：删除，删除选定的行
  • i：插入，在选定行上面插入一行指定内容
  • p：打印，如果同时指定行，表达打印指定行；如果不指定行，则表示打印所有内容；如果有非打印字符，则以ASCII码输出。通常与-n一起使用
  • s：替换，替换指定字符
  • y：字符转换

三.sed具体用法实例

  • 输出符合条件的文件，-n表示输出处理后的结果，p表示正常输出
输出所有内容
[root@localhost ~]# sed -n 'p' b.txt
1:the gilrs 
2:the boys  
3:the gg
4:the mm

5:the ff

[root@localhost ~]# 

输出第3行内容
[root@localhost ~]# sed -n '3p' b.txt
3:the gg
[root@localhost ~]# 

输出第3行到第6行内容
[root@localhost ~]# sed -n '3,6p' b.txt
3:the gg
4:the mm

5:the ff
[root@localhost ~]# 

输出奇数行和偶数行(相对的奇和偶)
[root@localhost ~]# sed -n 'p;n' b.txt //奇数行
1:the gilrs 
3:the gg
5:
[root@localhost ~]# sed -n 'n;p' b.txt  //偶数行
2:the boys  
4:the mm
6:the ff
[root@localhost ~]# 

输出从2到5行的奇数行
[root@localhost ~]# sed -n '2,5{p;n}' b.txt
2:the boys  
4:the mm
[root@localhost ~]# 

输出从第3行到最后一行的偶数行
[root@localhost ~]# sed -n '3 ,${n;p}' b.txt
4:the mm
6:the ff
[root@localhost ~]#
  • sed结合正则表达式，输出相应符合条件的行
输出包含字符o的行
[root@localhost ~]# sed -n '/o/p' a.txt
cold.
wod
often
ifconfig
ontime
AxyzxyozxyzC
[root@localhost ~]# 


输出从第4行开始第一个包含字符o的行，包括第四行
[root@localhost ~]# sed -n '4,/o/p' a.txt
777
wod
[root@localhost ~]# 


输出包含字符o的行的行号
[root@localhost ~]# sed -n '/o/=' a.txt
2
5
7
8
10
15
[root@localhost ~]#

输出以字符o和以字符o结尾的行
[root@localhost ~]# sed -n '/^o/p' a.txt
often
ontime
ontimo
[root@localhost ~]# sed -n '/o$/p' a.txt
ontimo

输出包含单词ontime的行
[root@localhost ~]# sed -n '/\<ontime\>/p' a.txt
ontime
[root@localhost ~]#
  • 删除符合条件的文本
列出所有内容且以序号标好
[root@localhost ~]# nl b.txt
     1	1:the gilrs 
     2	2:the boys  
     3	3:the gg
     4	4:the mm
     5	5:
     6	6:the ff

删除第三行
[root@localhost ~]# nl b.txt | sed '3d'
     1	1:the gilrs 
     2	2:the boys  
     4	4:the mm
     5	5:
     6	6:the ff

删除第三行到第六行
[root@localhost ~]# nl b.txt | sed '3,6d'
     1	1:the gilrs 
     2	2:the boys 

删除包含字符the的行 
[root@localhost ~]# nl b.txt | sed '/the/d'
     5	5:

删除空行
[root@localhost ~]# nl b.txt
     1	1:the gilrs 
     2	2:the boys  
     3	3:the gg
     4	4:the mm
       
     5	6:the ff
[root@localhost ~]# sed '/^$/d' b.txt
1:the gilrs 
2:the boys  
3:the gg
4:the mm
6:the ff
[root@localhost ~]# 

删除以字母开头或者.结尾的行
[root@localhost ~]# nl b.txt
     1	1:the gilrs 
     2	2:the boys  
     3	3:the gg
     4	4:the mm
     5	abc
     6	12adc.
     7	6:the ff
[root@localhost ~]# sed '/^a/d' b.txt | sed '/\.$/d'
1:the gilrs 
2:the boys  
3:the gg
4:the mm
6:the ff
[root@localhost ~]#
  • 替换符合条件的文本，s（字符串替换）、c（整行/整块替换）、y（字符转换）
将每一行中第一个A替换成THE
[root@192 ~]# sed 's/A/THE/' a.txt
THEb.
cold.

777
wod
bet
often
ifconfig
islase
ontime
ontimo
beat
THExyzC
THExyzxyzC
THExyzxzy0927C
THExyzxyozxyzC

将全文本中x替换成THE
[root@192 ~]# sed 's/x/THE/g' a.txt
Ab.
cold.

777
wod
bet
often
ifconfig
islase
ontime
ontimo
beat
ATHEyzC
ATHEyzTHEyzC
ATHEyzTHEzy0927C
ATHEyzTHEyozTHEyzC

将全文本中的x删除
[root@192 ~]# sed 's/x//g' a.txt
Ab.
cold.

777
wod
bet
often
ifconfig
islase
ontime
ontimo
beat
AyzC
AyzyzC
Ayzzy0927C
AyzyozyzC

在每一行的行首加上#符号
[root@192 ~]# sed 's/^/#/' a.txt
#Ab.
#cold.
#
#777
#wod
#bet
#often
#ifconfig
#islase
#ontime
#ontimo
#beat
#AxyzC
#AxyzxyzC
#Axyzxzy0927C
#AxyzxyozxyzC
#

在每一行的行尾加上#
[root@192 ~]# sed 's/$/#/' a.txt
Ab.#
cold.#
#
777#
wod#
bet#
often#
ifconfig#
islase#
ontime#
ontimo#
beat#
AxyzC#
AxyzxyzC#
Axyzxzy0927C#
AxyzxyozxyzC#
#

在3到5行的行首加上#
[root@192 ~]# sed '3,5s/^/#/' a.txt
Ab.
cold.
#
#777
#wod
bet
often
ifconfig
islase
ontime
ontimo
beat
AxyzC
AxyzxyzC
Axyzxzy0927C
AxyzxyozxyzC

在包含的A字符的行首加上#
[root@192 ~]# sed '/A/s/^/#/' a.txt
#Ab.
cold.

777
wod
bet
often
ifconfig
islase
ontime
ontimo
beat
#AxyzC
#AxyzxyzC
#Axyzxzy0927C
#AxyzxyozxyzC
  • 迁移符合条件的文本，H，复制到剪切板；g、G，将剪切板中的数据覆盖/追加至指定行；w，保存为文件；r，读取指定文件；a，追加指定内容
将第一行到第三行的内容复制到第五行下面
[root@192 ~]# sed '1,3{H;d};5G' b.txt
the mm
abc

the gilrs 
the boys  
the gg
12adc.
the ff

将包含the的行复制，粘贴到最后一行下面
[root@192 ~]# sed '/the/{H};$G' b.txt
the gilrs 
the boys  
the gg
the mm
abc
12adc.
the ff

the gilrs 
the boys  
the gg
the mm
the ff

把含有the的行保存到c.txt文件中
[root@192 ~]# sed '/the/w c.txt' b.txt
the gilrs 
the boys  
the gg
the mm
abc
12adc.
the ff
[root@192 ~]# ls
anaconda-ks.cfg  b.txt                 公共  图片  音乐
a.txt            c.txt                 模板  文档  桌面
awkprof.out      initial-setup-ks.cfg  视频  下载
[root@192 ~]# cat c.txt
the gilrs 
the boys  
the gg
the mm
the ff

将/etc/hostname内的内容粘贴到包含the的行下
[root@192 ~]# sed '/the/r /etc/hostname' b.txt
the gilrs 
localhost.localdomain
the boys  
localhost.localdomain
the gg
localhost.localdomain
the mm
localhost.localdomain
abc
12adc.
the ff
localhost.localdomain

在第三行下面新加一个内容为NEW的新行
[root@192 ~]# sed '3aNEW' b.txt
the gilrs 
the boys  
the gg
NEW
the mm
abc
12adc.
the ff

在含有the的行下新加一个内容为NEW的行
[root@192 ~]# sed '/the/aNEW' b.txt
the gilrs 
NEW
the boys  
NEW
the gg
NEW
the mm
NEW
abc
12adc.
the ff
NEW

在第三行下新加两行，内容分别为NEW1，NEW2
[root@192 ~]# sed '3aNEW1\nNEW2' b.txt
the gilrs 
the boys  
the gg
NEW1
NEW2
the mm
abc
12adc.
the ff
[root@192 ~]#
  • 使用脚本编辑文件，使用sed脚本，将多个编辑指令存放到文件中，通过“-f”选项来调用
[root@192 ~]# sed '/the/{H};$G' b.txt            //将含有the的行复制到最后一行下面
the gilrs 
the boys  
the gg
the mm
abc
12adc.
the ff

the gilrs 
the boys  
the gg
the mm
the ff
[root@192 ~]# vim b.sh             //sed脚本

#!/bin/bash
/the/H
$G

[root@192 ~]# sed -f b.sh b.txt         //执行sed脚本的格式
the gilrs 
the boys  
the gg
the mm
abc
12adc.
the ff

the gilrs 
the boys  
the gg
the mm
the ff
[root@192 ~]#
  • 在脚本中使用sed，操作文件
#!/bin/bash
yum install vsftpd -y
#样本配置文件路径
A="/usr/share/doc/vsftpd-3.0.2/EXAMPLE/INTERNET_SITE/vsftpd.conf"
#主配置文件路径
B="/etc/vsftpd/vsftpd.conf"
#备份主配置文件
[ ! -e "$B.bak" ] && cp $B $B.bak
#修改匿名用户的权限，且把样本文件写入主配置文件
sed -e '/^anonymous_enable/s/YES/NO/g' $A > $B
#修改主配置文件中的本地用户的权限
sed -i -e '/^local_enable/s/NO/YES/g' -e '/^write_enalbe/s/NO/YES/g' $B
#在主配置文件中添加监听权限
grep "listen" $B || sed -i '$alisten=YES' $B
#设置开机自启ftp服务
systemctl restart vsftpd
systemctl enable vsftpd

 

EoinXu
关注
  • 1
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
shell之正则表达式
LiuHuan303的博客
11-07 929
目录 一，正则表达式概述 1，正则表达式定义 2，元字符 2，表示次数 3，位置锚定 4，分组 5，扩展正则表达式 一，正则表达式概述 1，正则表达式定义 正则表达式，又称正规表达式，常规表达式 使用字符串来描述，匹配一系列符合某个规则的字符串（主要匹配命令结果和文本内容） 正则表示式组成： 普通字符：大小写字母，数字，标点符号及一些其他符号 元字符：在正则表达式中具有特殊意思的专用字符 2，元字符 . 匹配任意单个字符，可以是一个汉字 [] 匹配指定范围内的...
shell --正则表达式
luxunlx123的博客
09-02 217
########################### grep #文本过滤命令 #贪婪模式 把所有东西都会显示 grep 命令是一种强大的文本搜索工具，根据用户指定的“模式”对目标文本进行匹配检查打印匹配的行 由正则表达式或者字符及其文本字符所编写的过滤条件 正规的 grep 不支持扩展单元的正则表达式子，竖线是用于表示“或”的扩展正则表达式元字符，正规 grep 无法识别 加上 \ 这...
sed中正则表达式的使用
wwlhz的专栏
09-10 9246
sed是linux下文本处理的一个非常重要的工具，可用于批量文本的查找和替换，也可以采用正则表达式格式。 正常用法 sed ‘s/pattern/replace_string/’ file 这个命令并不会直接替换file文件中的内容，只是会输出替换后的内容。如果要实时替换生效，需要加上 -i 选项(in place的意思)，即： sed -i ‘s/pattern/replace_str...
sed与正则表达式
07-10 5887
sed -i命令详解 sed入门详解教程 sed 是一个比较古老的，功能十分强大的用于文本处理的流编辑器，加上正则表达式的支持，可以进行大量的复杂的文本编辑操作。sed 本身是一个非常复杂的工具，有专门的书籍讲解 sed 的具体用法，但是个人觉得没有必要去学习它的每个细节，那样没有特别大的实际意义。网上也有很多关于 sed 的教程，我也是抱着学习的心态来学习 sed 的常见的用法，并进行系统的总结，内容基本覆盖了 sed 的大部分的知识点。文中的内容比较简练，加以实际示例来帮助去理解 sed 的使用...
sed -i 命令入门详解
热门推荐
码灵的博客
06-13 9万+
sed 是一个比较古老的，功能十分强大的用于文本处理的流编辑器，加上正则表达式的支持，可以进行大量的复杂的文本编辑操作。sed 本身是一个非常复杂的工具，有专门的书籍讲解 sed 的具体用法，但是个人觉得没有必要去学习它的每个细节，那样没有特别大的实际意义。网上也有很多关于 sed 的教程，我也是抱着学习的心态来学习 sed 的常见的用法，并进行系统的总结，内容基本覆盖了 sed 的大部分的知识点。文中的内容比较简练，加以实际示例来帮助去理解 sed 的使用。 1、sed介绍 sed 全名为 stre
正则表达式 --sed
xinwenhuayu的博客
04-23 217
sed命令格式如下： sed　　参数　　功能选项　　文件名或其他标准输入 sed参数如下： -i：修改文件内容，不是由屏幕输出 -n：取消默认输出，只有被 sed 特殊处理的那一行才 -e：直接在命令行上进行 sed 动作编辑 -f：运行在文件中的 sed 动作 -r：支持扩展型正则表达式 n1,n2：n1 行到 n2 行 sed功能选项如下： a：追加内容到指定行后 i：插...
sed正则表达式替换字符方法
逆风水手的博客
04-23 4139
在 Linux 命令行中，可以使用 sed 命令来替换指定文件中的指定字符。中不包含特殊字符，如空格、引号等，否则可能会导致替换失败或出现意外结果。表示全局替换，即替换所有匹配的字符串，而不是只替换第一个。参数表示直接修改文件内容，而不是输出到终端，是一个存在的文件名，否则会出现错误提示。使用 sed 命令进行替换时，要确保。表示要进行替换的文件名。，并保存到原文件中。表示要被替换的字符串，表示替换后的字符串，
linux系统shell正则表达式-练习工具和教材
01-04
在Linux Shell环境中，正则表达式常与grep、sed、awk等命令结合使用，以实现高效的数据筛选和处理。 1. 元字符：正则表达式的核心是元字符，它们具有特殊的含义。例如，`.`表示任意单个字符，`^`表示行首，`$`表示...
Shell正则表达式之grep、sed、awk实操笔记
09-15
主要介绍了Shell正则表达式之grep、sed、awk实操笔记,本文使用grep、sed、awk配合正则达到了一些需求和目的,需要的朋友可以参考下
Linux命令行与shell脚本编程-正则表达式的应用案例
最新发布
06-04
在“Linux命令行与shell脚本编程-正则表达式的应用案例”中，我们将深入探讨如何在Linux环境中运用正则表达式来实现高效的数据操作。 一、Linux命令行中的正则表达式 1. `grep`命令：用于在文件或输入流中查找符合...
linux-Shell编程视频教程
12-03
11.1 Shell编程-正则表达式.mp4 11.2.1 Shell编程-字符截取命令-cut命令.mp4 11.2.2 Shell编程-字符截取命令-printf命令.mp4 11.2.3 Shell编程-字符截取命令-awk命令.mp4 11.2.4 Shell编程-字符截取命令-sed命令...
shell-tutorial：Shell入门教程（Shell教程书）
02-05
此外，正则表达式在Shell脚本中用于匹配和处理文本字符串，如在文件名中搜索特定模式。`grep`命令可以查找包含特定模式的行，`sed`则用于进行文本流编辑。 最后，别忘了实践是提高Shell技能的最佳途径。通过编写...
sed正则表达式讲解（很不错）
L1259863243的博客
02-24 7176
sed是一种流编辑器，它是文本处理中非常中的工具，能够完美的配合正则表达式使用，功能不同凡响。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有 改变，除非你使用重定向存储输出。Sed主要用来自动编辑一个或多个文件；简化对文件的反...
【shell】shell学习之正则表达式和sed命令
sunny哈哈的博客
10-16 1062
shell脚本语言包含了众多用于解决Unix/Linux系统问题的工具，其中有不少和文本处理相关，包括sed、awk、grep(awk和grep命令已经在前面的文章中进行了说明)，这些工具可以相互结合以满足文本处理需求。 正则表达式是一种基础的模式匹配技术。大多数文本处理工具都支持正则表达式，我们可以对文本文件执行过滤、剥离（strip）、替换、搜索等操作。
shell脚本之sed
m0_56107775的博客
05-06 2366
目录一、sed 工具1、概念2、工作流程3、常见sed 命令用法格式4、常见sed命令选项5、常见sed命令操作二、sed 的使用1、输出符合条件的文本（p 表示正常输出） 一、sed 工具 1、概念 sed（Stream EDitor）是一个强大而简单的文本解析转换工具，可以读取文本，并根据指定的条件对文本内容进行编辑（删除、替换、添加、移动等），最后输出所有行或者仅输出处理的某些行。sed也可以在无交互的情况下实现相当复杂的文本处理操作，被广泛应用于Shell脚本中，用以完成各种自动化处理任务。 2、工
Sed与正则表达式
weixin_42225437的博客
05-16 452
sed sed是Stream Editor（字符流编辑器）的缩写，简称流编辑器。 sed是操作、过滤和转换文本内容的强大工具 常用功能包括结合正则表达式对文件实现快速增删改查，其中查询的功能中最常用的两大功能是过滤（过滤指定字符串）、取行（取出指定行）。 语法： sed [选项] [sed内置命令字符] [输入文件] 选项： 参数选项 解释 -n 取消默认sed的输出，常与sed内置命令p一起用（p代表打印） -i 直接将修改结...
正则表达式与sed结合应用
2301_78496557的博客
09-25 283
正则表达式：对文本内容进行过滤，查找，匹配，正则可以匹配完整的大小写基本正则表示次数:*.匹配前面的字符任意次，包括0次，（有多少算多少，尽可能长的匹配）.*. 匹配前面的字符任意次，但是不包括0次，也就是匹配所有:匹配前面的字符出现0次或者1次 ，有且只有一次\+：匹配前面出现的字符，至少得有一次，要>=1\{n\}：匹配前面出现的字符等于几次\{m.n\}:匹配前面出现的字符最少M次。最多是n数\{,n}:匹配前面的字符最多n次。
Shell编程三剑客之sed
weixin_71429844的博客
08-15 837
Shell编程三剑客之sed
shell-----判别成绩---case语句的简单应用
qq_42761527的博客
11-29 2965
#!/bin/bash read -p "输入你的成绩(0~100)：" ack if [ $ack -lt 0 ] || [ $ack -gt 100 ] then echo "输入有误!" else case $ack in [0-5][0-9]) echo "不合格" ;; [6-7][0-9]|80) ...
shell sed正则表达式
08-30
- *1* [Shell正则表达式之grep、sed、awk实操笔记](https://download.csdn.net/download/weixin_38660295/12846597)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值