shell脚本在sed的使用

最新推荐文章于 2024-07-02 01:14:49 发布
最新推荐文章于 2024-07-02 01:14:49 发布
阅读量887 收藏 14
点赞数 16
文章标签： linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_70752974/article/details/136766853
版权
本文介绍了sed，一个非交互式文本编辑器，通过正则表达式进行文本处理。文章详细讲解了sed的工作原理、数据定位方法、常用指令如打印、删除、替换以及正则定位的应用实例。
摘要由CSDN通过智能技术生成

概念

    sed全名为Stream Editor 流式编辑器，用我们的程序的方式来编辑文本，功能很强大。sed是grep的继任者。与vim 等这些编辑器不同，sed是一中非交互式的编译器，（用户不用去参与编辑过程）

  sed是用我们的预先设定好的编辑指令对输入的文本进行编辑，完成之后把结果输出到屏幕

sed基本上都是使用正则模式匹配。

sed是一个古老的编译器，是在1973年到1974之间出现的，在贝尔（at&t 美国电话电报公司IBM ）实验室（晶体管，C，c++，UNIX第一台有界面的系统，）谷歌实验室（最早实验无人驾驶，大数据----发表了三篇论文  Doug Cutting狗哥）开发完成，

sed工作原理：

                  sed会一次处理我们的一行内容。处理时，把当前处理的行存储在临时缓冲区，成为“模式空间”，接着使用sed命令处理缓冲区里面的内容，处理完成后把缓冲区的内容送往屏幕，接者处理下一行，这样不断重复，直到文件末尾。文件内容没有改变，除非使用重定向存储输出。

                缓冲区：缓冲区又称为缓存，它是内存空间的一部分。也就是说，在内存空间中预留了一定的存储空间，这些存储空间用来缓冲输入或输出的数据，这部分预留的空间就叫做缓冲区。缓冲区根据其对应的是输入设备还是输出设备，分为输入缓冲区和输出缓冲区

正则匹配过程：

              就是拿个正则表达式所表示的字符串去和原字符串进行匹配，直到匹配到原串中一个完整的子串就表示匹配成功。-----原串内容“this  is  better desk”  正则表示esk

 

使用sed

       语法格式： 

            语法： 命令 | sed 选项 （定位符）  指令

              sed  选项 （定位符）  指令  文件名        # （定位符）  指令 相对文件的哪一行进行操作

                选项

                -n  屏蔽默认输出

                -r 支持我们的扩展正则

               -i写入文件

     

sed‘定位符 指令’

 数据定位

         行号定位  通果行号进行定位

          

[root@localhost ~]# sed  -n "2p" /etc/hosts        // 屏蔽默认输出，打印第二行

::1         localhost localhost.localdomain localhost6 localhost6.localdomain6

[root@localhost ~]#

[root@localhost ~]# sed "2p" /etc/hosts             //没有屏蔽默认输出，打印第二行

127.0.0.1   localhost localhost.localdomain localhost4 localhost4.localdomain4

::1         localhost localhost.localdomain localhost6 localhost6.localdomain6

::1         localhost localhost.localdomain localhost6 localhost6.localdomain6

打印1-3行  

[root@localhost ~]# sed -n "1,3p" /etc/passwd

root:x:0:0:root:/root:/bin/bash

bin:x:1:1:bin:/bin:/sbin/nologin

daemon:x:2:2:daemon:/sbin:/sbin/nologin

[root@localhost ~]#

打印奇数行    1~2从第一行行开始每次行号自加2

[root@localhost ~]# sed -n "1~2p" /etc/passwd

打印偶数行 

[root@localhost ~]# sed -n "2~2p" /etc/passwd

打印从第2行开始后面连续的三行            2，+定位符

[root@localhost ~]# sed -n "2,+3p" /etc/passwd

          正则定位 

        sed可以使我们的正则定位到自己需要的编辑内容 (///)

           [root@localhost ~]# sed -n "/^root/p" /etc/passwd    过滤以root开头的行  /字符/ //的作用怕与p混淆

            [root@localhost ~]# sed -rn "/[0-9]{3}/p" /etc/passwd     过滤三位数

  sed修改配置： 

sed编辑指令

    常用指令

 p（print）：打印

d（delete）： 删除

c（replace）： 替换

s（substitution）:替换关键字

=： 打印行号

 过滤数据（print指令）

过滤网卡的ip信息

[root@localhost ~]# sed -nr "/IPADDR/p" /etc/sysconfig/network-scripts/ifcfg-ens33 IPADDR=192.168.128.51

使用管道，过滤内存信息（如果获取内存的具体值，/proc/meminfo  展示所有的内存信息free）

[root@localhost ~]# free  | sed -n "/Mem/p"

Mem:         997952      639448       72704        2928      285800      151652

[root@localhost ~]#

过滤磁盘根分区。

[root@localhost ~]# df -h | sed -n "/\/$/p"   \紫色表示转移将后边的/进行转换，  黄色为一个整体//

   /dev/mapper/centos-root   17G  4.9G   13G   29% /

打印不连续的多行

[root@localhost ~]# sed -n "1p;2p;4p" /etc/passwd

root:x:0:0:root:/root:/bin/bash

bin:x:1:1:bin:/bin:/sbin/nologin

adm:x:3:4:adm:/var/adm:/sbin/nologin

[root@localhost ~]#

不打印第2行，其他都打印（出现！使用单引号包起来）

[root@localhost ~]# sed -n  '2!p' /etc/hosts

127.0.0.1   localhost localhost.localdomain localhost4 localhost4.localdomain4

[root@localhost ~]#

删除数据（delete指令      不加-i选项原文不会受影响）

 删除etc/hosts的全部内容。（如果·我们没有指定定位符默认匹配全文）

 [root@localhost ~]# sed 'd' /etc/hosts

把系统文件重定向到新文件

[root@localhost ~]# cat /etc/fstab > /tmp/fstab

[root@localhost ~]# cat /tmp/fstab

[root@localhost tmp]# sed '1,3d' fstab       #删除一到三行

[root@localhost tmp]# sed '/dev/!d' fstab    # 删除不包含dev的

[root@localhost tmp]# sed '/^#/d' fstab       #删除以#号开头的行

[root@localhost tmp]# sed '/^$/'d fstab      # 删除空行

[root@localhost tmp]# sed -i'1,3d' fstab    # 用久删除1到3行

替换行（replace指令  -c）

[root@localhost tmp]# sed 'c 123' fstab   将fstab全部替换为123

123

123

123

123

123

123

123

123

123

123

[root@localhost tmp]# sed '/IPADDR/c IPADDR=1.1.1.1' /etc/sysconfig/network-

scripts/ifcfg-ens33   将网卡的信息ip地址进行替换。

[root@localhost tmp]# sed '/127/c 127.0.0.1 localhost' /etc/hosts    //将文件host第一行进行替换，找不同的地方都可以进行替换。·

[root@localhost tmp]# cat /etc/hosts

127.0.0.1   localhost localhost.localdomain localhost4 localhost4.localdomain4

::1         localhost localhost.localdomain localhost6 localhost6.localdomain6

[root@localhost tmp]# sed '/127/c 127.0.0.1 localhost' /etc/hosts

127.0.0.1 localhost

::1         localhost localhost.localdomain localhost6 localhost6.localdomain6

[root@localhost tmp]# cat /etc/hosts

127.0.0.1   localhost localhost.localdomain localhost4 localhost4.localdomain4

::1         localhost localhost.localdomain localhost6 localhost6.localdomain6

[root@localhost tmp]# sed '/0/c 127.0.0.1 localhost' /etc/hosts

127.0.0.1 localhost

::1         localhost localhost.localdomain localhost6 localhost6.localdomain6

将shell文件第四行替换成xxxx

[root@localhost tmp]# sed '4c xxxx' /etc/shells

/bin/sh

/bin/bash

/sbin/nologin

xxxx

替换关键字  （  区域（表示第几行）///    区域（哪一个旧的内容））

  格式：s /旧的/新的/

  新建文件 s表示每一行的第一个。

 

[root@localhost day04]# vim test.txt

2046 2048 2046 2046

1001 2046 2999 1888

2046 2046 2046 2046

 //每行的一个2046替换成了xxxx （最后一个/没有写东西和/1等效）

[root@localhost day04]# sed 's/2046/xxxx/1' test.txt

[root@localhost day04]# sed 's/2046/xxxx/' test.txt

xxxx 2048 2046 2046

1001 xxxx 2999 1888

xxxx 2046 2046 2046

//将每行的每一个2046替换长xxxx      

[root@localhost day04]# sed 's/2046/xxxx/g' test.txt

xxxx 2048 xxxx xxxx

1001 xxxx 2999 1888

xxxx xxxx xxxx xxxx

//将每一行的第二个2046替换xxxx   

[root@localhost day04]# sed 's/2046/xxxx/2' test.txt

2046 2048 xxxx 2046

1001 2046 2999 1888

2046 xxxx 2046 2046

//&为代替之前内容，将我们每一行的第一个2046替换成（2046）----&可以在新的位置引用前面旧的内容

[root@localhost day04]# sed 's/2046/(&)/' test.txt

(2046) 2048 2046 2046

1001 (2046) 2999 1888

(2046) 2046 2046 2046

//将第二行的每一个2046替换成xxxx ---s（默认每一行）数字s（数字对应的这一行）

[root@localhost day04]# sed '2s/2046/xxxx/g' test.txt

2046 2048 2046 2046

1001 xxxx 2999 1888

2046 2046 2046 2046

//替换空等同于删除。

[root@localhost day04]# sed 's/2046//1' test.txt

 2048 2046 2046

1001  2999 1888

 2046 2046 2046

//替换

[root@localhost day04]# sed '2s/2046/xxxx/p' test.txt

2046 2048 2046 2046

1001 xxxx 2999 1888

1001 xxxx 2999 1888

2046 2046 2046 2046

//单独打印，将第二行的每一个2046替换成xxxx  -n 屏蔽默认输出

[root@localhost day04]# sed -n '2s/2046/xxxx/p' test.txt

1001 xxxx 2999 1888

将替换符（/）改为其他字符也可以达到一样的操作

[root@localhost day04]# sed 's#2046#xxxx#g' test.txt

xxxx 2048 xxxx xxxx

1001 xxxx 2999 1888

xxxx xxxx xxxx xxxx

[root@localhost day04]# sed 's,2046,xxxx,g' test.txt

xxxx 2048 xxxx xxxx

1001 xxxx 2999 1888

xxxx xxxx xxxx xxxx

[root@localhost day04]# sed 's.2046.xxxx.g' test.txt

xxxx 2048 xxxx xxxx

1001 xxxx 2999 1888

xxxx xxxx xxxx xxxx

//数字也可以当作替换符 （在s的后边/=\表面数字是替换符才能正常替换）

[root@localhost day04]# sed 's120461xxxx1g' test.txt

xxxx 2048 xxxx xxxx

1001 xxxx 2999 1888

xxxx xxxx xxxx xxxx

[root@localhost day04]# sed 's2\20462xxxx2g' test.txt

xxxx 2048 xxxx xxxx

1001 xxxx 2999 1888

xxxx xxxx xxxx xxxx

[root@localhost day04]# sed 's320463xxxx3g' test.txt

xxxx 2048 xxxx xxxx

1001 xxxx 2999 1888

xxxx xxxx xxxx xxxx

正则符号（）具有保留功能

-r支持扩展正则  \3和第三个（）对应，\2和第2个（）对应   \1和第一个（）对应

（）具有保留功能  \数字和前面（）的顺序绑定

[root@localhost ~]# echo "hello the world" | sed -r 's/^(.)(.*)(.)$/\2\1\3/'

ello the worlhd

打印行号（=）

[root@localhost ~]# sed -n '1=' /etc/passwd         //打印第一行的行号

1                      

[root@localhost ~]# sed -n '2=' /etc/passwd         

2                               

[root@localhost ~]# sed -n '/root/=' /etc/passwd               //打印包含root行的行号

1

10

[root@localhost ~]# sed -n '/bash$/=' /etc/passwd              //打印包含bash结尾行的行号

1

44

46

47

[root@localhost ~]# sed -n '$=' /etc/passwd             查看passwd文件有多少行。

47

[root@localhost ~]# wc -l /etc/passwd

47 /etc/passwd

想吃火锅和猪蹄
关注
Shell脚本中sed使用
jcrhl321的博客
04-21 4531
目录 一、sed编辑器 1、sed概述 2、sed 的工作流程 3、sed命令的常见格式 4、sed命令常用操作 二、sed常用命令使用 1、sed打印 2、sed删除 3、sed替换 4、sed插入与增加 4、sed剪切粘贴与复制粘贴 一、sed编辑器 sed（Stream EDitor）是一个强大而简单的文本解析转换工具，可以读取文本，并根据指定的条件对文本内容进行编辑（删除、替换、添加、移动等），最后输出所有行或者仅输出处理的某些行。sed 也可以在无交互的情况下...
Shell脚本之sed的用法
m0_52510600的博客
12-20 3382
1.sed：文本将数据进行选取、替换、删除、新增的命令。可以放在管道符之后处理。 2.常用的选项： -n：只输出符合条件的数据 -i：直接修改读取数据的文件，而不是由屏幕输出 -r：扩展正则 -f：从脚本文件中读取内容并执行 -i选项最常用，是直接在原文件中操作，不会输出到屏幕 3.常用的编辑命令： p：打印匹配行 d：删除指定行 a：在匹配行后面追加 i：在匹配行前面插入 c：整行替换 s：字符串替换 substitute 注意s是重点，后面的练习会用到 4.shell
shell脚本之“sed“命令
陌上花开，静待绽放！
05-14 2087
我不在乎你对我的不在乎。
shell脚本之sed
ruocheng6的博客
02-10 1144
前言 在Linux/UNIX系统中包含很多种类的文本处理器或文本编辑器，其中包括我们之前学习过的VIM编辑器与grep等，而grep，sed，awk更是shell编程中经常用到的文本处理工具，被称之为shell编程三剑客 1、sed概述 ■文本处理工具，读取文本内容，根据指定的条件进行处理，如删除、替换、添加等 ■可在无交互的情况下实现相当负载的文本处理操作 ■被广泛应用于shell脚本，以完成自动化处理任务 ■sed依赖于正则表达式 ■工作原理 读取 --->> 执行 ---&g
Shell脚本之sed篇
最新发布
云端梦留白的博客
07-02 82
目录：一、概述二、sed基本语法格式三、简单正则表达式四、sed脚本指令(注释、替换、删除、追加、打印、下一行、读写文件、退出、多行模式）五、综合案例一、概述1.sed是一款流编辑工具，用来对文本进行过滤与替换工作，特别是当你想要对几十个配置文件做统计修改时，你会感受到sed的魅力！sed通过输入读取文件内容，但一次仅读取一行内容进行某些指令处理后输出，所以sed更适合于处理大数据文件。2.sed流程：* 通过文件或管道读取文件内容。
shell脚本--sed的用法
热门推荐
xiapang009的专栏
10-21 1万+
写的比较好的sed用法，记录下以后查阅留着用! sed在处理文本时是逐行读取文件内容，读到匹配的行就根据指令做操作，不匹配就跳过。 sed是Linux下一款功能强大的非交互流式文本编辑器，可以对文本文件进行增、删、改、查等操作，支持按行、按字段、按正则匹配文本内容，灵活方便，特别适合于大文件的编辑。本文主要介绍sed的一些基本用法，并通过shell脚本演示sed的使用实例。 1.sed的使用方法，调用sed 命令的语法有两种： 一.在命令行指定sed指令对文本进行处理：sed +选项 ‘指令’ 文.
shell脚本之sed工具使用
qq_28361541的博客
12-06 936
文章目录一、前言二、sed的工作流程三、sed命令常见用法3.1、sed命令选项3.2、操作命令3.3、sed 常用示例3.3.1、p - 输出符合条件的文本3.3.2、d - 删除符合条件的文本3.3.3、s - 替换符合条件的文本3.3.4、迁移符合条件的文本3.3.5、f - 使用脚本编辑文件 一、前言 Sed是文本处理工具，依赖于正则表达式，可以读取文本内容，根据指定条件对数据进行添加、...
Linux Shell脚本编程－－sed命令详解.zip_shell sed_命令介绍_脚本 shell
09-24
在Linux系统中，Shell脚本编程是日常自动化任务和系统管理的重要工具，而`sed`（流编辑器，Stream Editor）则是Shell脚本中的一个强大工具。本文将深入讲解`sed`命令的基本概念、功能以及在Shell脚本中的具体应用。 ...
实战Shell脚本—sed,awk使用
03-17
总之，`sed`和`awk`是Shell脚本中强大的文本处理工具，它们在处理大量文本数据时提供了极大的便利。通过熟练掌握这两个工具，IT专业人员可以提高工作效率，解决各种文本处理和数据分析问题。在实际工作中，不断实践...
Shell脚本文本三剑客Sed
稻香的博客
05-30 737
目录 一、Sed 1. Sed概述 2. Sed工作流程 3. 基本用法 4. 常用选项 5. Sed命令的常用参数 二. Sed命令使用 1. 输出指定行 1.1 使用Sed命令输出指定行 1.2 结合正则表达式输出指定行 2. 插入符合条件的行 3. 删除符合条件的行 4. 替换符合条件的文本 4.1 字符串替换 5.迁移符合条件的文本 6.使用脚本编辑文件 一、Sed 1. Sed概述 sed编辑器时一种流编辑器，流编辑器会在编辑器处理数据之前基于预先提供..
SHELL脚本和Sed等工具的使用
ZZULI_Lucas的博客
10-30 223
SHELL脚本***********************重点 创建shell脚本 第一步：使用文本编辑器来创建文本文件 第一行必须包括shell声明序列：#! .#!/bin/bash 添加注释 注释以#开头 第二步：运行脚本 给予执行权限，在命令行上指定脚本的绝对或相对路径 直接运行解释器，将脚本作为解释器程序的参数运行 脚本规范 脚本代码开头约定 1、第一行一般为调用使用的语言 2、程序...
shell脚本-sed命令
m0_46569936的博客
03-10 451
sed sed是一种流编辑器，它一次处理一行内容，处理时会把当前处理的行储存在临时缓冲区中， 称之为“模式空间”，接着用sed名令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往 屏幕。接着处理下一行，不断重复直到文件末尾。文件内容本身不会因为使用sed命令而改变 除非使用了冲定向存储输出。 基本用法： sed[选项参数] ‘command’ filename 选项参数： -e 直接在指令模式上进行sed的动作编辑,意思是同时执行多个sed命令 command： a 新增，a的后面可以接字符串，在下一行出
shell脚本之正则表达式及sed，awk的使用
Luke
05-04 2838
一，正则表达式1，正则表达式语法Regular Expressionvim grep sed awk perl java nginx apache mail垃圾邮件过滤。。。等等都使用正则什么叫正则表达式：她是一种字符串的表达方式特点：1．理解正则表达式类似理解算术表达式：1+2 3*5 1+2*3 （1+2）*32．正则表达式像算术表达式一样也有优先级构成：一个正则表达式描述了一种模式或字符序列...
shell脚本中的sed命令用法
m0_61689114的博客
07-10 2190
原文链接：https://blog.csdn.net/qq_43028054/article/details/93136955。sed -n ‘/^hello/s//bin/bash//sbin/nologin/p’ /etc/passwd（转义）例2：df -h | sed '//dev/sda1/r /etc/mtab‘sed -n ‘3,100!例1：sed -n ‘s/root/ROOT/2p’ /etc/passwd。例2：sed ‘/^id/s/:3:/:6:/’ /etc/inittab。
【shell】sed：对文本查找后进行：替换、删除、插入、更改文本
hiliang521的博客
07-06 4385
【shell】sed：对文本查找后进行：替换、删除、插入、更改文本
Shell脚本学习之sed详解
mcusun2000的博客
04-04 551
http://blog.csdn.net/engledb/article/details/19623087 linux（1） 目录(?)[+] 在编写shell脚本的过程中，我们经常需要使用sed流编辑器和awk对文本文件进行处理。 一、什么是sed？     sed 是一种在线编辑器，它一次处理一行内容。sed是非交互式的编辑器。它不会修改文件，除非使用she
shell脚本替换sed
09-02
你可以使用`sed`命令来替换文本文件中的内容。`sed`是一个强大的文本处理工具，它可以对文件进行逐行处理，并根据指定的规则进行替换操作。 下面是一个简单的示例，演示如何使用`sed`命令替换文本文件中的字符串： ...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值