深入理解Linux三剑客(grep\sed\awk)

已于 2024-03-04 19:17:05 修改
阅读量1k 收藏 18
点赞数 34
分类专栏： devops 文章标签： linux mysql 数据库 git docker 容器 服务器
于 2024-02-29 11:15:15 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_21880261/article/details/136365506
版权

文章目录

1. 正则表达式

正则表达式REGEXP: Regual Expression：
由一类特殊字符及文本字符所编写的模式，其中有些字符不表示其字面意义，而是用于表示控制或通配的功能;

分两类:
基本正则表达式: BRE
扩展正则表达式: ERE

正则表达式的意义
处理大量的字符串
处理文本
通过特殊符号的辅助，可以让linux管理员快速过滤、替换、处理所需要的字符串、文本.

1.1 基本正则表达式: BRE

匹配字符 匹配次数 位置锚定
在这里插入图片描述

1.2 扩展正则表达式: ERE

扩展正则表达式必须用grep -E 才能生效

在这里插入图片描述

2. grep

2.1 简介

全拼: Global search REgular expression and Print out the line.
作用: 文本搜索工具，根据用户指定的“模式(过滤条件)”对目标文本逐行进行匹配检查，并打印匹配到的行
模式: 由正则表达式的元字符及文本字符所编写出的过滤条件;

语法:
grep 		[options] 	[pattern] 	file
命令				参数			匹配模式		文件

[options]:
  -i: 	忽略字符的大小写;
  -n:		显示行号
  -o:		仅显示匹配到的字符串本身;
  -v:		显示不能被模式匹配到的行;
  -E:		支持使用扩展的正则表达式元字符;
  -q: 	静默模式，即不输出任何信息;

匹配模式：可以是普通字符，也可以是正则表达式

grep命令是Linux系统中最重要的命令之一，功能是从文本文件或管道数据流中筛选匹配的行和数据，如果再配合正则表达式，功能十分强大。

2.2 案例

在这里插入图片描述

在这里插入图片描述
在这里插入图片描述

在这里插入图片描述

3. sed

3.1 简介

在这里插入图片描述

  1. sed是Stream Editor (字符流编辑器)的缩写，简称流编辑器。

  2. sed是操作、过滤和转换文本内容的强大工具。

  3. 常用功能包括结合正则表达式对文件实现快速增删改查，其中查询的功能
    中最常用的两大功能是过滤(过滤指定字符串)、 取行(取出指定行)。

  4. 语法

    sed [options] [sed内置命令字符] file

  • [options]参数：

在这里插入图片描述

  • sed的内置命令字符，用于对文件进行不同的操作功能，如对文件增删改查【a/d/i/p/s】

在这里插入图片描述

  • sed匹配范围

在这里插入图片描述

3.2 案例

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

3.3 sed练习题

在这里插入图片描述
在这里插入图片描述

4. awk

4.1 简介

awk是一个强大的linux命令, 有强大的文本格式化的能力，好比将一些文本数据格式化成专业的excel表的样式。

语法：

在这里插入图片描述

  • awk可选参数

在这里插入图片描述

  • awk内置变量【一般与-v配合使用】
    在这里插入图片描述

  • pattern模式

    默认处理文件所有行，可以限制文件处理的行，包括正则表达式、指定行、[NR==5]、BEGIN模式、END模式。

    awk ‘/正则表达式/动作’ 文件

    awk -F ‘#’ ‘/^dog/{print $0}’ test.txt

  • 动作

    一般是输出操作，print printf

4.2 案例

在这里插入图片描述

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

4.3 awk练习题

awk重点是分割符的选择，可以选择多个分割符，比如[ :]表示以空格或者:为分割符！

在这里插入图片描述在这里插入图片描述
在这里插入图片描述

Mr朱墨
关注
专栏目录
15分钟搞定Linux三剑客 grep sed awk
三川小哥 狂想曲
01-17 315
剑客grep 来者何人 grep是linux上的字符串搜索匹配命令。这个名字来自于linux编辑器vim的一个命令g/re/p，表示全局匹配某个正则表达式并打印出来，这也体现了grep自身的功能。 基本技能 搜索字符串 比如我们想在一个有10万条信息的文本中找到Zhang3的信息： $ cat students.txt name age phone address LiSi 18 10086 Beijing Zhang3 19 10001 Sichuan
Shell（二）文本处理工具(Linux三剑客 grep sed awk )
weixin_44992260的博客
06-14 239
目录一、grep2.二、sed三、练习 一、grep 测试: 过滤/etc/passwd中间的root 2. *#0-任意个 ‘-w.{1,}s’##至少1次 ‘-w.{1,3}s’##1-3次 ‘-w.?s’##0-1次 ‘-w.+s’##1-任意次 ‘-w.{,3}s’##0-3次 ‘-we{,3}s’##e有0-3次 ‘-web{,3}s’##b有0-3次 ‘-w（eb）{,3}s’##eb有0-3次 练习： 请显示系统中能被su命令切换的用户名称 二、sed 只能锁锁一个关键子，一个条件 .
Linux三剑客（grep,awk,sed）
m0_50267176的博客
12-12 2330
在学习之前，我们要思考一个问题：Linux三剑客有哪些？（其实题目已经给出了答案）Linux三剑客可以提高文本处理能力，系统管理能力和脚本编辑能力，对于Linux系统的使用和管理都有着重要的作用。学习Linux三剑客（grep,sed,awk）有以下作用：grep：用于在文件中搜索指定的字符串，用于对文本进行替换和编辑，用于对文本进行分析和处理。掌握这三个工具可以提高文本处理的效率和精确度。Linux三剑客在系统管理中有着广泛的应用，可以用于日志分析，数据提取，批量处理等任务，提高系统管理效率。
linux三剑客（grep、sed、awk）
qq_41323475的博客
11-16 1万+
linux三剑客的学习笔记
linux 三剑客sed
m0_69354915的博客
07-18 213
1.{n;p}为偶数行，{p;n}为奇数行2.sed命令结合正则表达式时，正则表达式以“/”包围3.在使用sed时，-i选项要慎重，因为-i后原文件将被修改4.sed广泛用于脚本中，用于删选出我们想要的信息，进行自动化运维httpshttpshttpshttpshttpshttpshttpshttpshttpshttpshttpshttpshttpshttpshttpshttpshttpshttpshttpshttpshttpshttpshttps。...
Linux 三剑客
最新发布
Lance_mu的博客
01-29 1513
它经常被用于脚本和自动化任务中，以执行基本的文本替换、删除、插入和其他编辑操作。2、apple替换成orange，末尾是指定替换操作的行为，没有 g 标志，只替换每一行中的第一个匹配到的 “apple”，而不会进行全局替换。awk是一个强大的文本分析工具，它使用一种类似于编程的语言来处理文本文件和字符串。一种强大的文本搜索工具，用于在文件内容中查找指定的字符串，并将匹配到的行输出到标准输出。替换操作：使用sub或gsub命令可以在匹配模式的行中进行替换操作。打印行：使用print命令可以打印匹配模式的行。
linux三剑客
m0_66727391的博客
04-24 8507
grep 、sed、awk被称为linux中的"三剑客"。 　　grep 更适合单纯的查找或匹配文本 　　sed 更适合编辑匹配到的文本 　　awk 更适合格式化文本，对文本进行较复杂格式处理 系统三剑客-grep 正则查找 grep -v "^#|^$" 不显示注释行和空行 系统三剑客-sed sed 字符流的编辑器，处理每行的字符 全屏编辑工具 vi/vim cat >>xxx<<EOF...EOF 编辑脚本：修改文件内容时 1）擅长对行进行操作处理 （增删改查）...
文本三剑客：grep sed awk
01-07
grep和正则表达式 什么是正则表达式： 正则表达式用于描述字符排列和匹配模式的一种语法规则。它主要用于字符串的模式分隔、匹配、查找及替换操作 元字符 * 重复匹配前一个字符0到多次 . 匹配除了换行符外...
Linux文本处理三剑客grep、sed、awk用法详解
weixin_44310047的博客
06-18 1396
Linux文本处理工具grep、sed、awk用法详解 文章目录Linux文本处理工具grep、sed、awk用法详解1、grep1）grep简介2）grep命令格式3）grep命令字符数量匹配规则2、sed1）sed简介2）sed命令格式3）sed字符替换3、awk1）awk简介2）awk命令格式 1、grep 1）grep简介 grep命令是一个Linux文本处理工具，它与egrep命令属于同一系列，这些命令都是用于对文件和文本执行重复搜索任务的工具。我们可以通过grep命令指定特定搜索条件来搜索文件及
三剑客grep sed awk
u010066048的专栏
08-15 481
sh -x 显示脚本执行过程 set命令设置开始debug和结束debug的位置 显示脚本执行过程，解决复杂脚本故障 这里写目录标题正则（RE）表达式应用场景规则注意事项正则符号基础正则扩展正则正则 VS 通配符grepsedawk 正则（RE）表达式 应用场景 匹配有规律的：手机、身份证号、日志 规则 注意事项 所有的符号都是英文符号 通过grep 需加上引号 给grep、egrep加上颜色 alias grep='grep --color=auto' alias egrep='egrep --c
Linux三剑客
03-02
Linux最强三剑客 sed grep awk 写的很不错，值得收藏。
Linux 文本处理三剑客之 Sed
热门推荐
高飞的博客
03-15 31万+
Linux 文本处理三剑客之 Sed
Linux三剑客之sed(一)
T3212379478的博客
06-21 369
sed是每次从input-file中读取一行记录，并在该记录上执行sed-commands，首先从input-file中读取第一行，然后执行所有的sed-commands；通常使用p时，还需要使用-n来屏蔽sed的默认输出，否则当执行命令p时，每行记录会输出两次。顺序：read-execute-print-repeat（读取-执行-打印-重复），简称REPR。如果开始的四行中没有匹配到Jason，那么会打印第四行以后匹配到Jason的内容。读取一行到模式空间（sed内部的一个临时缓存，存放读取到的内容）
Linux文本处理三大利器Grep、AWK、Sed
Da_Zhuang的博客
04-24 685
Linux三剑客是文本处理工具，它们可以帮助我们快速、高效地对文本进行处理。其中包括了grep、awk、以及sed这三个强大的命令行工具。grep，它可以根据正则表达式查找相关内容并打印对应的数据。awk，它可以根据定位到的数据行处理其中的分段。sed，它可以定位到数据行并对数据进行增删改查操作。这些工具在Linux系统中得到了广泛的应用，因此成为了Linux系统管理员和开发者必须要掌握的技能之一。
利器 | 测试必会之 Linux 三剑客 ( grep / awk / sed )
weixin_71807218的博客
01-17 1979
这些资料，对于【软件测试】的朋友来说应该是最全面最完整的备战仓库，这个仓库也陪伴上万个测试工程师们走过最艰难的路程，希望也能帮助到你！
Linux三剑客(awk、sed、grep) 和 正则表达式
m0_57504851的博客
09-12 5873
主要以正则和grep、sed、awk命令示例，保姆级案例解释说明。
Linux—文件处理三剑客（sed详解）
weixin_53560205的博客
09-14 982
文章目录前言一、工作流程执行显示二、命令格式三、常用选项及操作四、示例1.打印内容2.使用地址3.删除行4.替换标记5.插入 前言 sed是一种流编辑器，流编辑器会在编辑器处理数据之前基于预先提供的一组规则来编辑数据流，sed编辑器可以根据命令来处理数据流中的数据，这些命令要么从命令行中输入，要么存储在一个命令文本文件中，流编辑器的工作过程可以理解为：是从上往下依次执行，就像流水一样，一行一行逐行来执行的 一、工作流程 读取 sed从输入流(文件、管道、标准输入)中读取一行内容并存储到临时的缓冲区中(又称
shell脚本之sed
m0_56107775的博客
05-06 2402
目录一、sed 工具1、概念2、工作流程3、常见sed 命令用法格式4、常见sed命令选项5、常见sed命令操作二、sed 的使用1、输出符合条件的文本（p 表示正常输出） 一、sed 工具 1、概念 sed（Stream EDitor）是一个强大而简单的文本解析转换工具，可以读取文本，并根据指定的条件对文本内容进行编辑（删除、替换、添加、移动等），最后输出所有行或者仅输出处理的某些行。sed也可以在无交互的情况下实现相当复杂的文本处理操作，被广泛应用于Shell脚本中，用以完成各种自动化处理任务。 2、工
Linux三剑客grep, awk, sed：高效文本处理与搜索工具详解
本文档深入讲解了Linux系统中三个强大的文本处理工具：grep、awk和sed，它们在日常运维和开发过程中发挥着关键作用，特别是对于文本内容的搜索、过滤和格式化。这些工具都支持逐行处理，使得在大量数据中快速定位...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Mr朱墨

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值