linux三剑客之sed命令详解及用法

最新推荐文章于 2023-10-04 16:34:42 发布
最新推荐文章于 2023-10-04 16:34:42 发布
阅读量500 收藏 2
点赞数
分类专栏： Linux
原文链接：https://blog.51cto.com/13517084/2069074
版权

原文链接：https://blog.51cto.com/13517084/2069074

原文标题：linux三剑客之sed命令详解及用法

目录

内容:

第1章 sed是什么

第2章 sed功能与版本

第3章 语法格式

3.1 语法格式

第4章 常用功能

4.1 查询:

4.1.1 #单行 - 行号

4.1.2 多行 连续

4.2 增加

4.2.1 多行增加:  \n 换行符  (三种方法)

4.2.2 不显示文件中空行

4.3 替换

4.3.1 不加g  将每一行中第一处匹配的字符串进行替换

4.3.2 sed 先备份在修改文件内容

4.3.3 变量替换     双引号识别     ###  把###之间定义变量

4.4 新案列:批量修改文件名    命令的拼接

4.4.1 方法一:命令拼接

4.4.2 方法二:rename

4.5 sed命令常见的坑  -ri   和  -ir

4.5.1 -r与-i同时使用

4.5.2 -i禁止与-n一起使用

内容:

1.sed命令介绍

2.语法格式,常用功能

   查询  增加  替换 批量修改文件名

第1章 sed是什么

字符流编辑器 Stream Editor

Sed是一款流编辑工具，用来对文本进行过滤与替换操作，特别是当你想要对几十个配置文件做统一修改时，你会感受到Sed的魅力！Sed通过一次仅读取一行内容来对某些指令进行处理后输出，所以Sed更适合于处理大数据文件。首先，Sed通过文件或管道读取文件内容，但Sed默认并不直接修改源文件，而是将读入的内容复制到缓冲区中，我们称之为模式空间(pattern space)，所有的指令操作都是在模式空间中进行的，然后Sed根据相应的指令对模式空间中的内容进行处理并输出结果，默认输出至标准输出(即屏幕上)。Sed的工作流程如下图所示：

第2章 sed功能与版本

1 对于小文本文件，我们使用vim命令即可打开，但是对于大文本文件，vim会一次将其全部加载到内存中，此时会导致内存溢出或者是处理速度极其慢的情况，这个时候就需要一种工具来解决这个问题，即：sed。由于是流式处理，所以一次只加载文本的一行内容到内存中，这个时候就不会出现内存加载溢出的情况。

2 处理大文本文件,日志,配置文件等

3 增加,删除,修改,查询

sed  --version

sed  -i 修改文件内容

 

第3章 语法格式

3.1 语法格式

sed [选项] [sed指令] [输入文件]

sed -i.bak 's#oldboy#oldgril#g' oldbboy.txt

先备份在修改

-i   ---sed的参数

修改

-s    --sed指令

g   ---小尾巴/修饰

 

sed  找谁  干啥

找谁----条件(查找)

干啥----命令  替换 删除  增加

图片1.png 

3.2 命令执行过程

图片3.png

sed 特性:默认输出

  -n 取消默认输出

模式空间:内存中专门为sed腾出的一块地

第4章 常用功能

4.1 查询:

4.1.1 #单行 - 行号

显示第几行

[root@oldboyedu43-lnb oldboy]# sed -n '3p' person.txt

103,Alex,COO

 

显示包含oldboy的行

#包含oldboy的行

[root@oldboyedu43-lnb oldboy]# sed -n '/oldboy/p' person.txt

101,oldboy,CEO

‘//’   //内支持正则表达式         过滤内容

4.1.2 多行 连续

找出第1到3行

sed -n ‘1,3p  person.ttx’

 

#显示包含oldboy的行到包含yy的行

[root@oldboy-gao oldboy]# sed -n '/oldboy/,/yy/p' person.txt

101,oldboy,CEO

102,zhangyao,CTO

103,Alex,COO

104,yy,CFO

 

显示文件的第1,4,5行

[root@oldboy-gao oldboy]# sed -n '1p;4p;5p' person.txt

101,oldboy,CEO

104,yy,CFO

105,feixue,CIO

同一行多条命令用;(分号)分隔

 

 

小结:

1. 行号

2. 正则表达式 ‘//p’

3. 范围 ‘/oldboy/,/yy/’

 

4.2 增加

4.2.1 多行增加:  \n 换行符  (三种方法)

1. 文件的最后一行增加两行
106,wuxingge,UFO
107,lee,XO

1)echo

echo -e "106,wuxingge,UFO\n107,lee,XO" >>person.txt

2)cat

[root@oldboy-gao oldboy]# cat >>person.txt <<ha

106,wuxingge,UFO

107,lee,XO

ha

3) sed    行号a           在文件中某一行追加内容

[root@oldboy-gao oldboy]# sed  '$a106,wuxingge,UFO\n107,lee,XO' person.txt   最后一行

 

a ===  append     追加    --下一行

i ==== insert       插入  -----上一行

错误

[root@oldboy-gao oldboy]# sed '2a gyf is a student\nhe's a good boy' person.txt

> ^C

三个单引号乱了

解决:单引号换双引号

 

删除    d      一行

4.2.2 不显示文件中空行

grep -v '^$' person.txt

sed '/^$/d' person.txt

awk '!/^$/' person.txt

sed -n '/^$/!p' person.txt

 

!(叹号) sed  awk  find 中表示取反

4.3 替换

4.3.1 不加g  将每一行中第一处匹配的字符串进行替换

[root@oldboy-gao oldboy]# cat person.txt

101,oldboy,CEO

[root@oldboy-gao oldboy]# sed 's#[1-9]#AAA#g' person.txt|egrep -v '^$'

AAA0AAA,oldboy,CEO

加g --global  每一行进行全部替换 ---> sed指令s的替换标志之一(全局替换)

[root@oldboy-gao oldboy]# sed 's#[1-9]#AAA#' person.txt|egrep -v '^$'

AAA01,oldboy,CEO

 

 

 

 

4.3.2 sed 先备份在修改文件内容

sed  -i.bak ‘s#[1-9]#AAA#g’ person.txt

先把文件备份为person.txt.bak

然后再修改文件内容

4.3.3 变量替换     双引号识别     ###  把###之间定义变量

[root@oldboyedu43-lnb oldboy]# x=oldboy                       定义x   y 两个变量

[root@oldboyedu43-lnb oldboy]# y=oldgirl

[root@oldboyedu43-lnb oldboy]# sed "s#$x#$y#g" person.txt         $x   $y    应用变量

101,oldgirl,CEO

 

102,zhangyao,CTO

 

 

2. 后项引用

 

1)把匹配到的内容按规定格式形式

[root@oldboy-gao oldboy]# echo '123456'|sed -r 's#(.*)#<\1>#g'

<123456>

2)引用前面匹配到的内容

[root@oldboy-gao oldboy]# echo '123456'|sed -r 's#(.*)#<\1>#g'

<123456>

新方法 :&表示前面正则匹配到的内容  

[root@oldboy-gao oldboy]# echo '123456'|sed 's#.*#<&>#g'

<123456>

前面每个数字都加上< >号

[root@oldboy-gao oldboy]# echo '123456'|sed 's#.#<&>#g'

<1><2><3><4><5><6>

 

 

4.4 新案列:批量修改文件名    命令的拼接

把.jpg修改为.avi

-rw-r--r--. 1 root root 0 Jan 10 00:24 oldboy01.jpg

-rw-r--r--. 1 root root 0 Jan 10 00:24 oldboy02.jpg

-rw-r--r--. 1 root root 0 Jan 10 00:24 oldboy03.jpg

-rw-r--r--. 1 root root 0 Jan 10 00:24 oldboy04.jpg

-rw-r--r--. 1 root root 0 Jan 10 00:24 oldboy05.jpg

4.4.1 方法一:命令拼接

[root@oldboy-gao oldboy]# ls *.jpg|sed -r 's#(.*)jpg#mv & \1avi#g'

mv oldboy01.jpg oldboy01.avi

mv oldboy02.jpg oldboy02.avi

|bash   把前面的输出交给 bash(命令解释器) 执行

[root@oldboy-gao oldboy]# ls *.jpg|sed -r 's#(.*)jpg#mv & \1avi#g'|bash

[root@oldboy-gao oldboy]# ls *.avi

oldboy01.avi  oldboy03.avi  oldboy05.avi  oldboy07.avi  oldboy09.avi

oldboy02.avi  oldboy04.avi  oldboy06.avi  oldboy08.avi  oldboy10.avi

小结:

1. 命令拼接--解决不会循环

2. 先在屏幕上拼接出目标命令--最终交给bash执行

4.4.2 方法二:rename

rename  from                 to                file

       你要替换的内容       替换成什么        替换哪些文件

        jpg                  avi                *.jpg

 

[root@oldboy-gao oldboy]# rename jpg avi *.jpg

[root@oldboy-gao oldboy]# ls *.avi

oldboy01.avi  oldboy03.avi  oldboy05.avi  oldboy07.avi  oldboy09.avi

oldboy02.avi  oldboy04.avi  oldboy06.avi  oldboy08.avi  oldboy10.avi

 

sed用法小结:

1. 排除                          !

2. 特殊符号===获取行号                        =

3. 一条sed语句执行多条命令                ;

 

4.5 sed命令常见的坑  -ri   和  -ir

4.5.1 -r与-i同时使用

***-r参数必须在前面

-ri

正常

-ir

先把文件备份为xxxr

然后再替换文件中的内容

4.5.2 -i禁止与-n一起使用

会把原文件内容清空

 

木木统
关注
专栏目录
linux三剑客之sed命令详解
qq_43382735的博客
11-23 1122
linux三剑客之sed命令详解 上篇文章讲的是文本过滤工具grep linux三剑客之grep命令详解，今天继续讲一下linux三剑客之文本编辑工具sed。 sed 是一种新型的，非交互式的编辑器，它能执行与编辑器 vi 相同的编辑任务。sed 编辑器没有提供交互式使用方式，使用者只能在命令行输入编辑命令、指定文件名，然后在屏幕上查看输出。 sed 编辑器没有破坏性，它不会修改源文件，而是将源文件拷贝一份放在操作空间中，然后对操作空间中的副本进行操作，可以使用重定向符号将结果输出到指定文件或者使用-i参数
shell命令三剑客之sed命令详解
阿鹏的笔记
04-05 3097
文章目录1.初识sed命令1.1 sed命令是什么1.2 sed工作原理1.3 sed 命令怎么用1.4 示例1.4.1 sed的n选项和编辑命令p的示例1.4.2 sed的d编辑命令（不删除原文件内容）示例1.4.3 sed的编辑命令之a追加命令示例1.4.4 sed的编辑命令之i插入命令示例1.4.5 sed的编辑命令之c替换命令示例1.4.6 sed的编辑命令之r读入命令示例1.4.7 se...
Linux三剑客命令之sed
icanflying的博客
01-27 2393
Linux中最重要的三个命令在业界被称为“三剑客”，它们是awk,sed,grep sed 是一种在线编辑器，它一次处理一行内容。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有 改变，除非你使用重定向存储输出。Sed主要用来自动编辑一个或多个文件；简化对文件的反复操作；编写转换程序等。 终端输入sed --help可以看到所有的语法
Linux 三剑客之 sed 命令
csuwubing的博客
02-02 435
1、概述 sed 是一种在线编辑器，它一次处理一行内容。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有改变，除非你使用重定向存储输出。Sed主要用来自动编辑一个或多个文件；简化对文件的反复操作；编写转换程序等。   2、
Linux三剑客——sed命令
LiLi的博客
08-06 695
作用 sed命令是一个非交互式的行文本编辑器，它能对文件内容进行编辑，默认每次处理文本文件中所匹配到一行内容到模式空间，然后用后面的命令进行操作，操作完成之后，会把模式空间里面的内容输出到屏幕上，然后把模式空间中的内容删除，同时把下一行所匹配到的内容读入模式空间内，依次循环，直到读取完整个文件。 sed 命令处理的是缓冲区中的内容，其实这里的缓冲区，就是模式空间 语法 sed语法支持两种格式，分别是 sed [options] ‘address command’ file sed [options]
Linux三剑客之sed命令
ChampionDong的博客
04-14 409
sed sed是一个很好的文件处理工具，本身是一个管道命令，主要是以行为单位进行处理，可以将数据行进行替换、删除、新增、选取等特定工作，下面先了解一下sed的用法 sed命令行格式为： sed [-nefri] ‘command’ 输入文本 常用选项： -n∶使用安静(silent)模式。在一般 sed 的用法中，所有来自 STDIN的资料一般都会被列出到萤幕上。但如果加上 -n 参数后，...
Linux三剑客命令从入门到放弃
03-25
在IT领域，Linux操作系统是许多系统管理员和开发者的重要工具，其中Linux三剑客——AWK、SED和GREP，是日常工作中不可或缺的命令行工具。它们各自承担着文本处理、流编辑和搜索的关键任务，帮助用户高效地处理大量...
Linux的文本三剑客awk、sed、grep及其他文本处理命令，详细解析
cylcylccyyll的博客
07-14 682
s的使用为s/旧/新/，/([a-z]+)([a-z]+)([a-z]+)/为在echo处匹配到的，位置分别为123，/\3\2\1/是将前面的位置变成321“\”为转义字符，可以让其后面的内容原样输出。name[$1]拿$1做字段key让$2做value，如果这个数组里面有key，就累加，初始值是0+value，END是文件里所有的行都处理完了，最后去执行end部分的命令，end里面的只执行一次。egrep相当于grep-E支持扩展正则，-o只会输出你所匹配到的，不匹配的不输出。......
第八章 shell编程之sed
qq_65710645的博客
07-24 55
d操作用于删除文本的特定行，会删除指定的所有内容，则使用该命令必须特别小心，若忘记指定处理行的话会删除所有内容，也不会有任何输出。执行：默认情况下，所有的sed 命令都在模式空间中顺序地执行，除非指定了行的地址，否则sed 命令 将会在所有的行上依次执行。使用a(append)动作在指定行的下一行追加一行，使用i(insert)动作在指定行前插入一行，两者格式相同。g：对数据中所有匹配到的内容进行替换，若省略g则只会对第一次匹配的内容进行替换。用于使用数字指定处理的行区间，或者使用正则进行过滤。
linux 三剑客之sed
weixin_42818344的博客
11-12 401
sed是一种流编辑器，它是文本处理中非常中的工具，能够完美的配合正则表达式使用，功能不同凡响。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有 改变，除非你使用重定向存储输出。Sed主要用来自动编辑一个或多个文件；简化对文件的反复操作；编写转换程序等。sed处理文本时以行为单位。
linux三剑客之sed
白开水不加糖
06-09 579
Linux sed 命令是利用脚本来处理文本文件。 sed 可依照脚本的指令来处理、编辑文本文件。 Sed 主要用来自动编辑一个或多个文件、简化对文件的反复操作、编写转换程序等。 参数说明： -e<script>或--expression=<script> 以选项中指定的script来处理输入的文本文件。 -f<script文件>或--file=...
Linux文本处理三剑客之sed命令
最新发布
qq_64989514的博客
10-04 650
sed 是文本处理中非常好用的工具，能够完美的配合正则表达式，主要用来自动编辑一个或多个文件，可将数据进行替换、删除、新增、选取特定行等操作，从而简化对文件的反复操作，编写转换程序等。处理时，先把当前处理的行存储在临时缓冲区中（模式空间），接着用 sed 命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。然后，处理下一行，这样不断重复，直到文件处理结束。sed [参数选项] 操作。
LINUX学习—sed命令（LINUX三剑客）
LINUX学习笔记—sed
08-22 262
sed sed基本用法 sed（ stream Editor）是一种流编辑器，默认不编辑原文件，仅对模式空间中的数据做处理，而后，处理结束后，将模式空间打印至屏幕； sed主要用来自动编辑一个或多个文件；简化对文件的反复操作；编写转换程序等。 行编辑器：逐行处理（全屏编辑器如vi) 语法： sed [option] ‘AddressCommand’ file… Optio...
Linux三剑客之sed常用命令
weixin_43866709的博客
11-05 273
1.在一个文件的首行添加内容 例如：现有一个test.csv文件，要在首行添加上hello world: sed -i "1i\hello world" test.csv **注意：**如果要将一个变量添加到文件行首，需要将变量用单引号引着 a="hello world" sed -i "1i\'${a}'" test.csv ...
Linux三剑客之sed--常用命令和用法
Sunshine0314的博客
11-22 251
Linux三剑客之sedLinux三剑客之sed1、sed命令作用2、sed常用语法 Linux三剑客之sed 1、sed命令作用 sed命令主要是对是数据进行选取、替换、删除和新增的操作，是编写shell脚本最常用的命令之一。 2、sed常用语法 sed [选项] ‘[动作]’ 操作的文件 -n：一般sed命令会把所有的数据都输入到屏幕上，加入此选项，只会把经过处理的行输出到屏幕上。 不加-n，会显示文件的所有内容和具体要显示的某一行 添加-n，可以只显示指定的行 -e：可以同时执行多条sed操作，
Linux三剑客之-sed
weixin_45876097的博客
09-26 125
Linux三剑客之-sed 描述 sed - stream editor for filtering and transforming text； sed 是 stream editor 的缩写，即流编辑器，默认读取整个文件并对其中的每一行进行修改； 使用方式 命令语法 sed [选项] '[行定位符]指令' 文件名 命令 | sed [选项] '[行定位符]指令' 常用选项 选项 描述 -h 显示帮助信息 -n 仅显示处理后的行信息 -r 定位符中使用扩展正则表达式
linux文本处理三剑客之sed
m0_64505752的博客
09-16 299
在文件内容过少的情况下我们也可以使用替换的方式将部署字母转换为大写，但我们只针对文本内容过少的文件可以这样处理，如果但文件内容过多，再使用替换的命令进行操作就会是一件冗长乏味的工作内容 [root@centos2 ~] # cat b find the Match statement转换命令可以进行小写字母到大写字母的转换，但它将转换应用于整个行。使用保持空间可以实现以上任务，因为可以用保持空间来存储输入行的备份而将语句名独立出来，并在模式空间进行转换。
掌握Linux必备：常用sed命令详解及应用
Linux中的sed命令是强大的文本流编辑器，它结合了正则表达式的强大功能，广泛应用于文本处理任务。sed的工作原理是逐行读取输入文件，将每一行内容存储在模式空间中，然后根据用户提供的命令进行处理，完成后再输出...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值