shell -sed工具使用

最新推荐文章于 2024-05-16 21:08:45 发布
最新推荐文章于 2024-05-16 21:08:45 发布
阅读量319 收藏
点赞数 1
分类专栏： shell 文章标签： shell脚本学习笔记
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/REVE_HOH/article/details/89225732
版权

目录

简介

  • sed工具式：
    - stream EDitor,流式编辑器
    - 非交互式，基于模式模式匹配过滤及修改文本
    - 逐行处理(特点)，并将结果输出到屏幕中
    - 可以实现对文本的输出，删除，替换，复制，剪切，到处，等各种操作

  • 命令格式

    • 主要用法：
      • 格式1：前置命令 | sed [选项] ‘编辑指令’
      • 格式2：sed [ 选项 ] ‘编辑指令’ 文件……

编辑指令 —> [定址符号]处理动作
定址符 --> [地址1地址2]]

  • 格式解析

    • 常见命令选项
      - -n : 屏蔽默认输出(全部文本)
      - -i : 直接修改文本内容
      - -r : 启用扩展的正则表达式，若与其他选项一起使用，应作为首个选项
    • 条件，可以式行号或者/正则/
      - 行号可以使用当个数字表示单行
      - 或者3，5表示连续的多行
      - 省略条件，则默认逐行处理全部文本
      - 匹配正则时，需要使用 #

  • 基本的处理动作
    - 常用动作指令

操作符用途指示示例
p打印行2，4p 输出第2、3、5、4行
d删除行2p;4p 输出第2、4行
s字符串替换s/old/new/(将每一行的第一个old替换成new)、 s/old/new/3(将每一行的第三个old替换成new)、s/old/new/g(将每一行的所有old替换成new)
  • sed [选项] ‘条件指令’ 文件… …
  • 支持正则表达式：
[root@room13pc37 ~]#head -5 /etc/passwd > /root/1.txt 	#先准备一份练习文件
[root@room13pc37 ~]# cat 1.txt
root:x:0:0:root:/root:/bin/bash
...#省略
#先直接使用动作指令
#用sed显示文本的内容：
[root@room13pc37 ~]# sed  'p' 1.txt 		#直接使用动作指令 “p”显示1.txt的文本内容
root:x:0:0:root:/root:/bin/bash
....#省略
--------------------------
#注意：我们会发现我们的1.txt文件只有5行内容，但是我们使用sed工具输出，它把文本内容输出两次。
#这是应为sed的特点是：逐行处理，显示到屏幕当中，所以在我们用“p”命令输出1.txt文本内容时间，默认还会显示多一次，对此我们可以使用-n来取消默认输出。
---------------------------
[root@room13pc37 ~]# sed -n  'p' 1.txt 		#取消默认输出
root:x:0:0:root:/root:/bin/bash
...#省略

[root@room13pc37 ~]# sed -n  '1,4p' 1.txt 		#输出1到4行的内容
root:x:0:0:root:/root:/bin/bash
...
[root@room13pc37 ~]# sed -n "1p;3p" 1.txt		#输出1、3行的内容
root:x:0:0:root:/root:/bin/bash
daemon:x:2:2:daemon:/sbin:/sbin/nologin

[root@room13pc37 ~]# sed -n '2,+2p' 1.txt 		#大家需要注意，+2p是指前面输出行的后面2行的内容。需要注意前面输出的是第2行的内容，所以一共输出的是3行内容
bin:x:1:1:bin:/bin:/sbin/nologin				#第2行的内容
daemon:x:2:2:daemon:/sbin:/sbin/nologin			# 第2行后面的2行内容
adm:x:3:4:adm:/var/adm:/sbin/nologin

[root@room13pc37 ~]# sed -n "1~2p" 1.txt 		#输出1，3，5行的内容，1～2是表示：从第1行开始输出，间隔输出两行。同理 2～2p ：输出2，4，6行的文本内容。
root:x:0:0:root:/root:/bin/bash					#第1行内容
daemon:x:2:2:daemon:/sbin:/sbin/nologin			#第3行内容
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin		#第5行内容

[root@room13pc37 ~]# head -5 /etc/passwd >  /root/3.txt | sed -n 'p' 3.txt  
root:x:0:0:root:/root:/bin/bash
...#省略
[root@room13pc37 ~]#
  • 使用正则表达式做定址符
[root@room13pc37 ~]# sed -n '/root/p' /etc/passwd		#搜索包含root的行
[root@room13pc37 ~]# sed -n '/^root/p' /etc/passwd		#搜索以root开头的行
[root@room13pc37 ~]# sed -n '/bash$/p' /etc/passwd		#搜索以bash结尾的行

  • sed工具的p、d、s操作指令案例集合

    • sed工具的p指令案例集锦（自己提前生成一个test.txt文件）
    [root@room13pc37 shell_test]# sed  -n 'p' test.txt           #输出所有行，等同于cat test.txt
[root@room13pc37 shell_test]# sed  -n '4p' test.txt          #输出第4行
[root@room13pc37 shell_test]# sed  -n '4,7p' test.txt        #输出第4~7行
[root@room13pc37 shell_test]# sed  -n '4,+10p' test.txt      #输出第4行及其后的10行内容
[root@room13pc37 shell_test]# sed  -n '/^bin/p' test.txt     #输出以bin开头的行
[root@room13pc37 shell_test]# sed  -n '=' test.txt          #输出文件的所有行号
[root@room13pc37 shell_test]# sed  -n '$=' test.txt          #输出文件的最后一行的行号
[root@room13pc37 shell_test]# sed  -n '/root/=' tset_sed.s.txt #说出文件包含root的行数
    • sed工具的d指令案例集锦（提前生成一个test.txt文件）
    [root@room13pc37 shell_test]# sed  '3,5d' test.txt             #删除第3~5行
[root@room13pc37 shell_test]# sed  '/xml/d' test.txt            #删除所有包含xml的行
[root@room13pc37 shell_test]# sed  '/xml/!d' test.txt         #删除不包含xml的行，!符号表示取反
[root@room13pc37 shell_test]# sed  '/^install/d' test.txt    #删除以install开头的行
[root@room13pc37 shell_test]# sed  '$d' test.txt                #删除文件的最后一行
[root@room13pc37 shell_test]# sed  '/^$/d' test.txt             #删除所有空行
    • sed命令的s替换基本功能（s/旧内容/新内容/选项)
    [root@room13pc37 shell_test]#vim  test.txt               #新建素材文件
2017 2011 2018
2017 2017 2024
2017 2017 2017	

[root@room13pc37 shell_test]#sed 's/2017/xxxx/'           test.txt	#把当前所有行的第一个2017都替换
[root@room13pc37 shell_test]#sed 's/2017/xxxx/g'          test.txt	#替换的是的当前行的所有
[root@room13pc37 shell_test]#sed 's/2017/xxxx/2'          test.txt	#替换的是当前行的的第二个2017
[root@room13pc37 shell_test]#sed 's/2017#2'              test.txt	#把所有行中的第二2017替换成 空，相当于删除。
[root@room13pc37 shell_test]#sed -n 's/2017/xxxx/p'      test.txt	#把所有行的第一个2017都替换调,同时显示所替换的行结果。

[root@room13pc37 shell_test]# head  /etc/passwd > tset_sed.s.txt	#素材文件
[root@room13pc37 shell_test]# sed -n 's/^root/xxx/p' tset_sed.s.txt	#把root开头所在的行给替换
xxx:x:0:0:root:/root:/bin/bash

[root@room13pc37 shell_test]# sed -n 's//bin/bash//bin/sh/p' tset_sed.s.txt	#	/ 过多系统无法识别，无法认为 “ /bin/bsah ”是一个整体
sed：-e 表达式 #1，字符 8：“s”的未知选项
[root@room13pc37 shell_test]# sed -n 's/\/bin\/bash/\/bin\/sh\/p' tset_sed.s.txt		#可以通过反斜杆来 " /bin/bash  "的 / 转义

#同时我们可以使用其他字符来代替  " s /// "的次操作符号。（数字键(0~9)上的符号都可以使用, 要求操作的符号一致即可）
[root@room13pc37 shell_test]# sed -n 's$/bin/bash$/bin/sh$p' tset_sed.s.txt
root:x:0:0:root:/root:/bin/sh

#增加注释、取消注释
[root@room13pc37 shell_test]#  sed '4,7s/^/#/'   test.txt         //将第4~7行注释掉（行首加#号）
[root@room13pc37 shell_test]#  sed 's/^#an/an/'  test.txt         //解除以#an开头的行的注释（去除行首的#号）

  • 例子 替换文件的内容：

#首先创建一个素材文件
[root@room13pc37 shell_test]# cat nssw.txt
hello the world
ni hao ma beijing

#删除文件中每行的第二个、最后一个字符
#分两次替换操作，第一次替换掉第2个字符，第二次替换掉最后一个字符：
#方法1
[root@room13pc37 shell_test]# sed 's/.//2;s/.$//' nssw.txt		# 用 . 来匹配任意一个字符。实现删除	多个个动作指令用 ； 隔开
hllo the worl
n hao ma beijin
#方法2
[root@room13pc37 shell_test]# sed -r 's/^(.)(.)(.*)(.)$/\1\3\4/;s/(.*)(.)$/\1/' nssw.txt
hllo the worl
n hao ma beijin

#将文件中每行的第一个、倒数第1个字符互换
#每行文本拆分为“第1个字符”、“中间的所有字符”、“倒数第1个字符”三个部分，然后通过替换操作重排顺序为“3-2-1
[root@room13pc37 shell_test]# sed -r 's/^(.)(.*)(.)$/\3\2\1' nssw.txt	#互换位置	
dello the worlh
gi hao ma beijinn
[root@room13pc37 shell_test]# sed -r 's/^(.)(.*)(.)$/\3\1/' nssw.txt	#删除中间部分内容。
dh
gn

#1.使用拓展的正则，需要加 -r选项。	
#2.（） 是保留的作用。 
#3.^(.)==保留第一行开头的字符；同理(.)$ ==保留最后一行的字符。		
#4.保留的字符可以使用	\1、\2、\3 分别来代替 前面的（）的内容。可以通过重排实现字符之间位置互换，类是与粘贴、剪切。
#5.有多个()就表示有多少部分，对于多少个\num。 \num的数量不能大于()的部分
-----------------------------------------------------------------------------------
  • 例子把该文件的中的数字，行首的空格删除掉
[root@room13pc37 shell_test]# cat nssw.txt
Hello the wo8rod
    ni h4ao m6a beijing		#前面是有空格的
#方法1
[root@room13pc37 shell_test]# sed -r 's/[0-9]//g;s/^( *)(.*)/\2/' nssw.txt		#使用() 保留的方法，  注意：( *)括号里面有空格
Hello the worod
ni hao ma beijing
#方法2
[root@room13pc37 shell_test]# sed -r 's/^ +//;s/[0-9]//g' nssw.txt   # "^ +" 之间有一个空格
Hello the worod
ni hao ma beijing

#若要保存修改，可以加上 -i 选项
  • 例子找出该文件的中的大写字母，并且给大写字母加行括号
[root@room13pc37 shell_test]# cat nssw.txt
Hello The worod
ni hao ma Beijing

[root@room13pc37 shell_test]# sed -r 's/([A-Z])/(\1)/g' nssw.txt		#使用() 粘贴复制，给\1加上()
(H)ello (T)he worod
ni hao ma (B)eijing

#[A-Z] 在这里是每一个行逐个查找
  • 应用1编写anonftp.sh脚本，用来装配匿名FTP服务
#!/bin/bash
yum -y install vsftpd
cp /etc/vsftpd/vsftpd.conf /etc/vsftpd/vsftpd.conf.old		#把源有的文件做一个备份，
sed -i 's/^#anon_u/anon_u /' /etc/vsftpd/vsftpd.conf
chmod o+w /var/ftp/pub
systemctl restart vsftpd
systemctl enable vsftpd

sed 文本块处理

  • 文本块处理动作：
操作符用途指令集合
i行前插入文本2iYY (在第2行之前添加文本行“YY”)， 4,7iYY (在第4-7 行的每一行前添加文本)
a行后插入文本2aYY (在第2行之后追加文本“YY”)、 /^XX/aYY (在以XX开头的行后添加文本 )
c替换当前行2cYY (将第2行的内容修改为 “YY” )
  • 应用
#单行文本处理
[root@server0 shell]# cat abc		#素材文件
#a
[root@server0 shell]# sed  'a 666' abc	#在文本行的每一行后面添加
[root@server0 shell]# sed '1a 666' abc	#在文本行的第一行后面添加
#c
[root@server0 shell]# sed '1c 666' abc	#在文本行的每一行替换
[root@server0 shell]# sed 'c 666' abc	#在文本行的第一行替换
#i
[root@server0 shell]# sed 'i 666' abc	#在文本行的每一行前面添加
[root@server0 shell]# sed '1i 666' abc	#在文本行的第一行前面添加

#多行文本处理
  • 导入到处操作
    • 基本动作
      • -r 动作结合 -i 选项才会存入，否则只是输出
      • -w 动作以覆盖的方式另存为新文件
操作符用途指令集合
r读取文件3rb.txt (在第3行下方插入文本b.txt)、4.7rb.txt(在第4到7行后插入文件b.txt)
w保存到文件3wc.txt (在第3行另存为文本c.txt)、4.7wc.txt(在第4到7行另存为文件c.txt)
[root@server0 shell]# sed 'r 123' abc
[root@server0 shell]# touch 123
[root@server0 shell]# sed 'w 123' abc
abcd
666
xyz
[root@server0 shell]# cat 123
abcd
666
xyz
[root@server0 shell]# sed 'w 1234' abc		#若写入覆盖的文件的文件不存在，则会自动创建该文件
abcd
666
xyz
[root@server0 shell]# ls
1234  abc  123

sed综合脚本应用

1. 本案例要求编写脚本getupwd.sh，实现以下需求：
	找到使用bash作登录Shell的本地用户
	列出这些用户的shadow密码记录
	按每行“用户名 --> 密码记录”保存到getupwd.log

[root@server0 shell]# cat getupwd.sh
#!/bin/bash
A=$(sed -n '/bash$/s/:.*//p' /etc/passwd)
for i in A
do
        pass1=$(grep $i /etc/shadow)
        pass2=${pass1#*:}
        pass3=${pass2%%:*}
        echo "$i ----> $pass3"
done
[root@server0 shell]# bash getupwd.sh
A ----> $6$UiGI4Tc2$htsXYn5cJnOqv3P1VLcUSgfjDu2pL5yiJBuua6foZAHdwqeuLHfYUfS/vBn27Wjvoel8EJgtdsMjyquqvKAmf1
  • 总结：
    总结知识点：

#sed [选项] ‘条件指令’ 文件

选项:

		-n 屏蔽默认输出
		-r 支持扩展正则
		-i 修改源文件

条件：

行号 4 4,5 4~2 4,+10

/正则/
指令：

p 打印

d 删除

s 替换s/旧/新/g

a 追加

i 插入

c 替换行
REVE_HOH
关注
专栏目录
shell中sed的用法
试试看吧。
06-14 1528
一：sed文本编辑器 sed：功能强大的流式文本编辑器 补充说明 sed 是一种流编辑器，它是文本处理中非常中的工具，能够完美的配合正则表达式使用，功能不同凡响。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有 改变，除非你使...
shell——sed工具
m0_72036727的博客
08-18 1974
sed常见的语法格式有两种，一种叫命令行模式，另一种叫脚本模式。
shell中sed命令
woquNOKIA的专栏
07-13 870
sed -i '/cd ${LDIR_DEST}\/webextend\/pc && ln -s \/hard\/www_winclient\/bboxpc.exe ./a\ \tcd ${LDIR_DEST}\/webextend\/pc && ln -s \/hard\/www_winclient\/'$i' .' #参考别人后自己改的，主要是加了个变量 sed -i '4i dfsdfd
shell脚本--sed的用法
热门推荐
xiapang009的专栏
10-21 1万+
写的比较好的sed用法，记录下以后查阅留着用! sed在处理文本时是逐行读取文件内容，读到匹配的行就根据指令做操作，不匹配就跳过。 sed是Linux下一款功能强大的非交互流式文本编辑器，可以对文本文件进行增、删、改、查等操作，支持按行、按字段、按正则匹配文本内容，灵活方便，特别适合于大文件的编辑。本文主要介绍sed的一些基本用法，并通过shell脚本演示sed的使用实例。 1.sed的使用方法，调用sed 命令的语法有两种： 一.在命令行指定sed指令对文本进行处理：sed +选项 ‘指令’ 文.
shell中sed的使用
Yy
11-29 1118
1.在命令行定义编辑器命令 命令格式 sed options script file sed不会修改文本文件的数据，他只会将修改后的数据发送到STDOUT。 2.在命令行上使用多个编辑器命令 将命令放在一个文件中 3.s命令使用替换标记 .数字代表新文本将替换第几处模式匹配的地方 .g，替换所有的 。p，原来的内容打印出来 。w file，将替
shell中的sed
Bilson99的博客
05-26 1364
目 录一、sed编辑器二、工作流程三、命令格式1、格式2、常用选项3、常用操作四、sed命令的使用1、打印内容2、使用地址 一、sed编辑器 sed编辑器时一种流编辑器，流编辑器会在编辑器处理数据之前基于预先提供的一组规则来编辑数据流。 sed编辑器可以根据命令来处理数据流中的数据，这些命令要么从命令行中输入，要存储在一个命令文本文件中。 二、工作流程 sed 的工作流程主要包括读取、执行和显示三个过程： 读取:sed 从输入流（文件、管道、标准输入）中读取一行内容并存储到临时的缓冲区中（又称模式空间
Shell脚本中sed使用
jcrhl321的博客
04-21 4531
目录 一、sed编辑器 1、sed概述 2、sed 的工作流程 3、sed命令的常见格式 4、sed命令常用操作 二、sed常用命令使用 1、sed打印 2、sed删除 3、sed替换 4、sed插入与增加 4、sed剪切粘贴与复制粘贴 一、sed编辑器 sed（Stream EDitor）是一个强大而简单的文本解析转换工具，可以读取文本，并根据指定的条件对文本内容进行编辑（删除、替换、添加、移动等），最后输出所有行或者仅输出处理的某些行。sed 也可以在无交互的情况下...
Linux Shell脚本编程－－sed命令详解.zip_shell sed_命令介绍_脚本 shell
09-24
在Linux系统中，Shell脚本编程是日常自动化任务和系统管理的重要工具，而`sed`（流编辑器，Stream Editor）则是Shell脚本中的一个强大工具。本文将深入讲解`sed`命令的基本概念、功能以及在Shell脚本中的具体应用。 ...
shell命令之-SED
03-16
**Shell命令之-SED** SED（Stream Editor）是Linux/Unix系统中的一种流式文本编辑器，它在处理文本时不需要打开或保存文件，而是直接读取标准输入或指定文件的内容，进行各种操作后再输出。这个强大的工具广泛应用...
一天一个shell命令 linux文本内容操作系列-sed命令详解
09-15
`sed` 是 stream editor 的缩写，是一种强大的文本编辑工具，在 Linux 和 Unix 系统中广泛使用。它主要用于对文本文件进行非交互式的编辑，支持对文本进行查找、替换、删除等操作。`sed` 的强大之处在于它可以完美地...
shell-utils:shell脚本小工具
03-07
使用`sed`（流编辑器）或者`awk`等工具，结合`find`命令，可以实现对指定目录及其子目录下所有文件的搜索和替换操作。例如，`find . -type f -exec sed -i 's/old_string/new_string/g' {} \;`命令会在当前目录及其...
shell中的sed使用
weixin_38451161的博客
08-10 390
修改倒屏之后无法U盘升级屏参的问题 "busybox sed -i 's#^m_pPanelName.*;#m_pPanelName = \"/config/panel/panel.ini#g' /config/model/Customer_1.ini"); LOG(); MSrv_Control::GetInstance()->userSystemCmd(cmdlin...
Shell中sed----学习
weixin_30505225的博客
04-26 103
sed原理及使用 目录 前言 一、简介 二、处理流程 三、命令选项options 四、pattern 1. 模式空间 2. 模式空间的转换 3. 地址匹配 五、procedure 1. 替换命令: s 2. 删除命令: d 3. 插入行/追加行/替换行命令: i/a/c 4. 打印命令: p/l/= 5. 转换命令: y 6. 取下一行命令:...
Shell命令——sed命令
主要记录嵌入式学习与开发过程。
03-06 3343
以下内容整理于《linux命令行与shell脚本编程大全【第三版】》一书。
shell中的sed用法
weixin_55614692的博客
05-25 465
shell脚本江湖秘籍只传有缘人——流编辑器“三剑客”之sed命令 一、流编辑器“三剑客”二、sed编辑器1、sed的工作流程2、命令格式3、常用选项4、常用操作5、打印内容6、使用地址7、删除行8、替换9、插入 一、流编辑器“三剑客” sedawkgrep 二、sed编辑器 1、sed的工作流程 2、命令格式 3、常用选项 选项说明-e 或–expression=表示用指定命令来处理输入的文本文件，只有一个操作命令时可忽略，一般在执行多个操作命令时使用-f 或–fil..
Shell中的sed编辑器
weixin_44822212的博客
05-15 761
一.sed行编辑器的简介 全称：stream editor 作用：用来操作纯ASCII码的文本。在处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间“（pattern space）可以指定仅仅处理哪些行。 sed符合模式条件的处理，不符合条件的不予处理；处理完成之后把缓冲区的内容送往屏幕，接着处理下一行，这样不断重复，直到文件的末尾。 二.sed命令的调用格式 1.sed [options]...
sed1line中文版(转)
08-12 130
sed1line中文版(转)[@more@]SED单行脚本快速参考（Unix 流编辑器）英文标题：USEFUL ONE-LINE SCRIPTS FOR SED (Unix stream editor) 原标题：HANDY ON...
shell命令之sed 命令详解
最新发布
2401_83786744的博客
05-16 1256
sed编辑器sed是一种流编辑器，流编辑器会在编辑器处理数据之前基于预先提供的一组规则来编辑数据流。sed编辑器可以根据命令来处理数据流中的数据，这些命令要么从命令行中输入，要么存储在一个命令文本文件中。sed 的工作流程主要包括读取、执行和显示三个过程：•读取：sed 从输入流（文件、管道、标准输入）中读取一行内容并存储到临时的缓冲区中（又称模式空间，pattern space）。
shell中sed的一些简单命令
weixin_45956520的博客
10-27 104
Shell命令编辑文本的sed简单用法目录用words2替换文本infile中的所有word1，并保存为outfile用words2更新文本infile中的所有word1打印infile中第3行的信息若在shell中事先定义了infile的路径，如何更新删除in.file中第3行到第5行的信息，保存到outfile 目录 简单介绍一下shell中sed的简单用法，用来批量处理文件或跑一些测试，需要改变一些输入参数时会比较方便。 用words2替换文本infile中的所有word1，并保存为outfile s
shell sed -i
07-25
对于您提到的"shell sed -i"，这是一个用于在Shell命令行中使用sed工具编辑文件的命令。具体来说，"-i"选项表示直接在原始文件中进行编辑，而不是输出到标准输出。sed命令可以用于查找、替换或者删除文本文件中的...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值