shell的三剑客sed

最新推荐文章于 2022-07-05 15:51:08 发布
最新推荐文章于 2022-07-05 15:51:08 发布
阅读量150 收藏 3
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_55609821/article/details/117016425
版权

文章目录

sed编辑器

  • sed是一种流编辑器，流编辑器会在编辑器处理数据之前基于预先提供的一组规则来编辑数据流。
  • sed编辑器可以根据命令来处理数据流中的数据，这些命令要么从命令行中输入，要么存储在一个命令文本文件中。

sed的工作程

  • 读取：sed从输入流（文件、管道、标准输入）中读取一行内容并存储到临时的缓冲区中（又称模式空间，pattern space)。
  • 执行：默认情况下，所有的sed 命令都在模式空间中顺序地执行，除非指定了行的地址，否则sed 命令将会在所有的行上依次执行。
  • 显示：发送修改后的内容到输出流。在发送数据后，模式空间将会被清空。在所有的文件内容都被处理完成之前，上述过程将重复执行，直至所有内容被处理完。

注意：

  • 在所有的文件内容都被处理完成之前，上述过程将重复执行，直至所有内容被处理完。
  • 默认情况下所有的sed命令都是在模式空间内执行的，因此输入的文件并不会发生任何变化，除非是用重定向存储输出。

命令格式：

sed -e'操作'文件1  文件2 ...
sed -n -e'操作·文件1  文件2 ...  #把显示的作用关掉
sed -f   脚本文件  文件1  文件2....   #-f指读取脚本文件命令执行其他文件 
sed -i -e'操作·文件1  文件2...        #对文件可以直接修改
例如
sed -e 'n{
操作1
操作2
...
}'文件1 文件2 ...      #可以执行很多文件

常用选项：

  • -e:表示用指定命令来处理输入的文本文件，只有一个操作命令时可省略，一般在执行多个操作命令使用
  • -f:表示用指定的脚本文件来处理输入的文本文件。
  • -h:显示帮助。
  • -n、–quiet 或silent:禁止sed编辑器输出，但可以与p命令一起使用完成输出。
  • -i:直接修改目标文本文件。

常用操作：

  • s:替换,替换指定字符。
  • d:删除,删除选定的行。
  • a:增加，在当前行下面增加一行指定内容。
  • i:插入，在选定行上面插入一行指定内容。
  • c:替换,将选定行替换为指定内容。
  • y:字符转换，转换前后的字符长度必须相同。
  • p:打印，如果同时指定行，表示打印指定行;如果不指定行，则表示打印所有内容;如果有非打印字符，则以ASCII码输出。其通常与"-n"选项一起使用。
  • l(小写L):打印数据流中的文本和不可打印的ASCII字符（比如结束符$、制表符\t)
sed -n -e 'p' 1.txt   #使用-n解决这个问题，要注意n要在e前面，n和p操作要结合使用

在这里插入图片描述

sed '=' sedfile.txt    #行号在内容上面
sed -n -e '=;p' sedfile.tx    #先追加行号再打印
注：‘；’表示前后顺序的

在这里插入图片描述

sed -n -e 'p' -n -e '=' sedfile.txt   #先打印内容，再输出行号

sed -n -e 'l' sedfile.txt      #扩展：输出内容并展示不可打印字符

注：多条命令使用-e不能去掉
在这里插入图片描述

使用地址功能

sed编辑器有两种寻址方式

  • 以数字形式表示行区间
  • 用文本模式来过滤出行

ps:数字与文本都要写在操作符的左边，文本需要用 // 解释
在这里插入图片描述
n 表示跳到下一行
在这里插入图片描述
行的范围 与操作符一起使用后，操作符需要加在 ${} 中
在这里插入图片描述
用文本模式来过滤出行

  • 文本需要写在 // 中， /文本/操作符
  • 区分大小写
  • | 等符号需要加转义符 \
sed -n -e '/root/p' /etc/passwd
sed -n -e '/bash$/p' /etc/passwd
sed -n -e '/ftp\|root/p' /etc/passwd

在这里插入图片描述

sed -n '/root/p' sedfile.txt
#sed查找文本 区分大小写

在这里插入图片描述
使用 -r 选项表示 操作中支持使用正则表达式，表达式要用 // 符号进行解释。

#正则表达式表示打印 以ro开头，o至少出现一次的字符串所在的行
sed -n -r '/ro{1,}t/p' /etc/passwd

在这里插入图片描述

删除

  • sed 是把文件读取到缓冲区中，在缓冲区中进行的删除，并不修改原文件的内容
  • 删除 操作符d 不能与 -n 选项一起使用，不然什么都不会输出
sed 'd' sedfile.txt    #全删
sed '3d' sedfile.txt    #删除第三行
'3,6d' 删3到6行    '3,$d' 删三到末尾所有行

sed -r '/^$/d' sedfile.txt    #使用正则表达式 删除空行

删除空行另外两种方法：
cat sedfile.txt | tr -s '\n'
cat sedfile.txt | grep -v "^$"

在这里插入图片描述

sed -r '/nologin$/d' /etc/passwd   
sed -r '/nologin$/!d' /etc/passwd   #!取反操作

在这里插入图片描述

#删除从。。到。。。之间的行，继续往下找，指直到文件读取完
sed '/1/,/3/d' numsedfile.txt

在这里插入图片描述

替换（常用）

格式：行范围 s/旧字符串/新字符串/替换标记

  • 行范围 与后面用空格隔开
  • 行范围如果是正则表达式，用 // 解释
4种替换标记：

数字：表明新字符串将替换【第几处匹配的地方】
g：表明新字符串将会替换【所有匹配的地方】
p：打印与替换命令匹配的行，与 -n 一起使用

w 文件：将替换的结果写到文件中

行范围可以用 1,4 或 1+3 等表示

直接替换

sed -n -e 's/root//gp' /etc/passwd   #将所有的（g） root 替换成空
sed -n -e 's/root//p' /etc/passwd   #将第一个 root 替换成空
sed -n -e 's/root//2p' /etc/passwd   #将第二个 root 替换成空

在这里插入图片描述

#将文件 /etc/passwd 第1到20行的 开头替换成#号
sed '1,20 s/^/#/' /etc/passwd
 
#将root开头的行 结尾替换为#
sed '/^root/ s/$/#/' /etc/passwd

#替换标记为空

在这里插入图片描述
使用指定的脚本文件来处理输入的文本文件
格式 ： -f 脚本文件file
其实就是把多条 sed 操作语句放到文件中，这样能够一次执行多条语句，不然只能一条一条的执行下去。
测试：
新增文件 script.sed ，添加内容：

/^root/ s/^/#/
/bash$/ s/\/bin\/bash/\/sbin\/nologin/

#//之间的符号要使用转义符

执行：能够根据scripr.sed文件中的语句对 /etc/passwd 进行多次操作
在这里插入图片描述
把 sed 执行结果写到文件中

#把 /etc/passwd 中第1到5行写到文件out.txt 中
sed '1,5w out.txt' /etc/passwd

在这里插入图片描述

#把 /etc/passwd 中第1到5行，的开头加上# 后 写到文件out.txt 中
sed '1,5 s/^/#/w out.txt' /etc/passwd

在这里插入图片描述
修改字符串分隔符
修改分隔符的好处是不需要再给表达式的重名如 / 再加上转义符\了

#把/bin/bash 替换为 /bin/csh
sed -n 's/\/bin\/bash/\/bin\/csh/p' /etc/passwd

#用!作为替换的分隔符，等同于/，不要再写转义符了
sed -n 's!/bin/bash!/bin/csh!p' /etc/passwd

#test.txt中有文件 94599
#将94599替换为9893
sed 's9\945\9\99\98\939g' test.txt
#sed -i's9\945\9\99\98\939g' test.txt  会更改test.txt 文件中的值。

#因为分隔符9 与表达式的内容9重名，所以表达式中的9需要加转义符\9 来表示 9。
#因此可以这样看 s9  \945\9\9  9  \98\93  9g
#用9做分隔符其实不好，重名了，只是为了演示用法

在这里插入图片描述

插入

 a： 增加，在当前行下面增加一行指定内容。
 i： 插入，在选定行上面插入一行指定内容。
 c： 替换，将选定行替换为指定内容。
 y： 字符转换，转换前后的字符长度必须相同。
 r： 跟文件名，注入文件中的内容

例子：

#将含有字符串45的行，整体替换为 ABC
sed '/45/c ABC' numedfile.txt

#将含有字符串45的行，字符45转换AB
sed '/45/ y/45/AB/' numsedfile.txt

#将含有字符串45的行，字符145转换ABC，字符45转换BC
sed '/45/ y/145/ABC/' numsedfile.txt

替换
在这里插入图片描述
在这里插入图片描述
添加：

#在1-3行每一行上面各添加一行ABCD
sed '1,3i ABCD' numsedfile.txt

#在1-3行每一行下面各添加一行ABCD
sed '1,3a ABCD' numsedfile.txt

在这里插入图片描述
在这里插入图片描述
从文件中导入数据

#在numsedfile.txt 的第三行后面增加 /root/test.txt 文件中的内容
sed '3r /root/test.txt' numsedfile.txt

在这里插入图片描述

#将包含root的行 剪切到末尾，H表示复制到剪切板，G表示粘贴到指定行后
sed '/root/{H;d};$G' /etc/passwd

#将1、2行 复制到 3和4行的下面
sed '1,2H;3,4G' /etc/passwd

先H复制后，用分号; 与G黏贴分开，表示 有先后顺序

去除黏贴后产生的空行
sed '1,2H;3,4G' /etc/passwd | sed '^$d'

在这里插入图片描述
在这里插入图片描述

使用sed修改文件

sed 的插入等操作符都是在缓冲区（模式空间）中 执行和显示的，并不会修改原文件内容
在这里插入图片描述
如果想用 sed 修改原文件，可以用-选项 ** -i 直接修改目标文本文件**
在这里插入图片描述

他和晚风一样温柔
关注
  • 0
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
linux 命令行一些要点（二）
cogbee的专栏
08-26 1679
1、压缩文件 （压缩，解压，查看压缩文件） bzip2 是一个无损压缩，采用的Burrow Wheller块状有序文本压缩算法和Huffman编码，bzip2能将文件压缩到原来的10%~12%。因此得到广泛运用。 bzip2可以对任何普通文件进行压缩，也可以对其他压缩工具压缩的文件进行二次压缩，但是不能对xxx.bz2的压缩文件进行二次压缩（你可以修改一下后缀，这样就可以继续压缩，也就是说
CentOS sed 命令
一直被模仿，从未被超越
11-25 4259
一、向文件中添加行 命令：a：表示指定行后插入内容；i：表示指定行前插入内容，下面演示指定行后插入内容。 #原始文件内容 [root@vm114 ~]# cat sedfile 111 222 333 444 555 1、在指定行后插入内容 #a表示插入，3表示行号，hello world表示插入的内容 [root@vm114 ~]# sed '3ahello world' sed......
Sed编辑器
芦苇的博客
05-19 322
内容概要一、Sed编辑器介绍二、sed的工作流程三、sed命令格式sed编辑器有两种寻址方式：删除行替换插入 一、Sed编辑器介绍 Sed编辑器又被称为流编辑器，流编辑器会在编辑器处理数据之前基于预先提供的一组规则来编辑数据流。 sed编辑器可以根据命令来处理数据流中的数据，这些命令要么从命令行输入，要么存储在一个命令文本中。 二、sed的工作流程 1、读取：sed 从输入流中读取一行内容并存储到临时缓冲区中。 2、执行：默认情况下，所有sed 命令都在模式空间中顺序的执行。 3、显示：发送修改后的内容到
linux 在线编辑,在线编辑器sed简单用法
weixin_39696665的博客
05-13 697
sed是一种在线编辑器，它一次处理一行内容。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”(pattern space)，接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有改变，除非你使用重定向存储输出。Sed主要用来自动编辑一个或多个文件；简化对文件的反复操作；编写转换程序等。以下介绍的是Gnu版本的Se...
Shell-sed编辑器
志当存高远
03-15 137
Shell-sed编辑器一、sed1、sed概述2、工作流程3、命令格式4、常用选项5、s:替换，替换指定字符。6、使用地址寻找7、删除行8、替换9、插入 一、sed 1、sed概述 sed编辑器可以根据命令来处理数据流中的数据，这些命令要么从命令行中输入，要么存储在一个命令文本文件中。 2、工作流程 sed的工作流程主要包括读取、执行和显示三个过程: 1.读取: sed从输入流 (文件、管道、标准输入) 中读取一行内容并存储到临时的缓冲区中(又称模式空间，pattern space) 2.执行:默认情况
Shell文本处理三剑客之sed的使用
01-08
sed 是 stream editor 的缩写，流编辑器，主要用于对标准输出或文件进行处理。 语法： stdout | sed [option] pattern command sed [option] pattern command file1 常用选项（option） # -n 只打印静默模式匹配...
shell脚本-正则、grep、sed、awk三剑客
12-16
在企业工作中，每天做的Linux运维工作中，时刻都会面对大量带有字符串的文本配置、程序、命令输出及日志文件等，而我们经常会有迫切的需要，从大量的字符串内容中查找符合工作需要的特定字符串。...
shell三剑客过滤文件内字符串长度输出
01-09
这里提到的"Shell三剑客"指的是awk、grep和sed，它们是处理文本数据的强大工具。当我们需要过滤文件中的内容，例如根据字符串长度进行筛选时，这三者都能发挥重要作用。下面我们将详细介绍如何使用awk、grep和sed来...
shell编程-文本文件处理（grep sed awk文本三剑客）
01-07
一、grep和正则表达式 1、正则表达式 以一串字符作为表达式向系统传达意思（过滤匹配数据），元字符是描述字符的字符，正则表达式是有一串字符和元字符构成的字符串，主要功能为文本查询和字符串操作，匹配文本 ...
教你搭建个人/企业私有云盘-seafile
热门推荐
天涯的浪子
03-28 7万+
工具/原料· Linux服务器（网上一大堆，不要虚拟注意，要云主机，这样你才有操作权限！小编的是89一个月的测试主机。）xshell（以前的教程中用到过，连接服务器用的）seafile开源的企业私有网盘系统，当然个人用别人也不会拦着你。方法/步骤1.连接linux服务器，安装lnmp环境（这个不会装的可以百度，按照官方教程来就行了。）2.下载seafile文件包3.使用screen -S seaf...
sed基本操作
yang_zhang_1992的博客
07-16 2803
一.sed命令调用方式 1.sed [选项] 'sed 命令' 输入文件 2.sed [选项] -f sed脚本文件 输入文件 3. ./sed脚本文件 输入文件 二、基本命令 sed -n 只打印第一行，不带-n的打印所有行 sed  -n '4p' log.txt  只打印第四行 sed  '4p' log.txt  打印所有行 sed -n '3,6p' log.tx...
sed 修改与删除文件内容
weixin_41204736的博客
08-29 8617
sed sed 's/book/books/' file 替换 直接编辑文件选项-i，会匹配file文件中每一行的第一个book替换为books： sed -i 's/abc/ABC/g' file 使用后缀 /g 标记会替换每一行中的所有匹配： sed 's/abc/ABC/g' file sed 's/^abc/&ABC/' file abcABC sed '/abc/'d ...
sed文本处理命令
weixin_34380296的博客
09-07 155
2019独角兽企业重金招聘Python工程师标准>>> ...
shell去除空行的办法
大叶子不小的博客
07-05 4864
一、去除空行的方法有时我们在处理和查看文件时，经常会有很多空行，为了美观或是有需要时，就有必要把这些除行去掉了，方法如下:1）用tr命令代码如下:cat 文件名 |tr -s ‘\n’2）用sed命令代码如下:cat 文件名 |sed ‘/^$/d’3）用awk命令代码如下:cat 文件名 |awk ‘{if($0!=”")print}’ cat 文件名 |awk ‘{if(length !=0) print $0}’4）用grep命令代码如下:grep -v “^$” 文件名...
shell脚本去除文件中的空行
随便写写
09-13 5376
目标文件 [clooker ~]$ cat 123 aaaaaaaaaaaaaaaaaaaaaaa bbbbbbbbbbbbbbbbbbbbbbb ccccccccccccccccccccccc ddddddddddddddddddddddd eeeeeeeeeeeeeeeeeeeeeee fffffffffffffffffffffff gggggggggggg ggggggggg [clooker ~]$ 1. 使用tr命令 tr的核心功能及时删除或者转换字符，详细说明如下： NAME
shell复习
hahaxixi131的博客
11-22 1046
文章目录shell复习1.如何获取一个文件每一行的第三个元素？2.shell函数能解决什么实际问题3.使用awk统计httpd访问日志中每个客户端IP的出现次数4.那些方式可以将标准输出和错误输出重定向到文件？5.正则表达式符号：*、+、？、[]、[^]、\\{n\\}分别代表什么含义6.shell中对变量字串进行截取的方式有哪些7.使用sed命令如何将文件中所有大写字母Q转换为小写字母q？8.执行如下命令会对test.txt文件产生什么样的影响9.编写脚本，用户输入密码，脚本判断密码是否正确，输入正确则提
sed用法
s2421458535的博客
09-15 1269
    博客 学院 下载 图文课 TinyMind 论坛 APP 问答 商城 VIP会员 活动 招聘 ITeye GitChat     写博客 发Chat 传资源 登录注册 我的博客 消息(1) 帐号设置 反馈 帮助 退出 原 sed 2018年08月08日 09:30:03 rick_grace...
sed命令和awk命令
weixin_55609814的博客
05-20 1174
sed命令sed命令■什么是sedsed的工作流程命令格式常用选项:常用操作:打印内容sed编辑器的寻址方式删除行替换插入 sed命令 ■什么是sed ●sed是一种流编辑器，流编辑器会在编辑器处理数据之前基于预先提供的一组规则来编辑数据流。 ●sed编辑器可以根据命令来处理数据流中的数据，这些命令要么从命令行中输入，要么存储在一个命令文本文件中。 sed的工作流程 ●sed的工作流程主要包括读取、执行和显示三个过程： ♦读取: sed 从输入流(文件、管道、标准输入）中读取一行内容并存储到临时的缓冲
shell三剑客awk sed grep
最新发布
02-24
Shell三剑客是指awk、sed和grep，它们是在Unix/Linux系统中非常常用的命令行工具，用于文本处理和数据提取。 1. awk（Aho, Weinberger, and Kernighan）是一种强大的文本处理工具，它可以根据指定的规则对文本进行分析和处理。awk以行为单位读取文本文件，并按照指定的规则进行匹配和处理。它支持自定义变量、条件语句、循环语句等，可以用于数据提取、格式化输出等任务。 2. sed（Stream Editor）是一种流式文本编辑器，它主要用于对文本进行替换、删除、插入等操作。sed按照指定的规则对输入文本进行处理，并将结果输出到标准输出或者文件中。它支持正则表达式匹配、替换、删除等操作，可以用于批量处理文本文件。 3. grep是一种强大的文本搜索工具，它可以在文件中查找指定的模式，并将匹配的行输出到标准输出。grep支持基本正则表达式和扩展正则表达式，可以根据不同的选项进行模式匹配、大小写敏感等操作。它常用于查找特定内容或者过滤文件中的行。 这三个工具在Shell脚本编程和命令行操作中非常常用，可以灵活处理文本数据，提取所需信息，实现各种文本处理任务。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值