Linux文本处理三剑客grep、sed、awk用法详解

最新推荐文章于 2023-11-30 09:31:28 发布
最新推荐文章于 2023-11-30 09:31:28 发布
阅读量1.4k 收藏 24
点赞数 4
分类专栏： Linux运维 文章标签： linux 运维 grep awk
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44310047/article/details/118023459
版权

Linux文本处理工具grep、sed、awk用法详解

文章目录

1、grep

1）grep简介

grep命令是一个Linux文本处理工具，它与egrep命令属于同一系列，这些命令都是用于对文件和文本执行重复搜索任务的工具。我们可以通过grep命令指定特定搜索条件来搜索文件及其内容以获取有用的信息。grep是全局搜索正则表达式并打印出匹配的行，其抓取数据是贪婪模式，即不会漏掉过滤内容，但准确性会相对降低。

2）grep命令格式
grep 匹配条件 处理文件名称
grep  root passwd 			##过滤root关键字所在的行
grep -i root passwd 		##忽略大小写过滤root关键字所在的行
grep -E "\<root" passwd 	##过滤root字符之前没有字符的行
grep -E "root\>" passwd 	##过滤root字符之后没有字符的行
grep -数字 					##显示过滤行以及上面几行和下面几行
grep -n 					##显示匹配的行所在行号
grep -A数字 				##显示过滤行以及下面几行
grep -B数字 				##显示过滤行以及上面几行
grep -v 					##反向过滤

实验步骤：
1）切换到一个空目录/mnt中，cp /etc/passwd .复制/etc/passwd文件到该目录（. 表示当前目录）中，避免文件内容过长删除一部分内容，使用grep命令在截取以某个字符串结尾的数据时，如果需要判断的结尾字符串有多个，需要用 | 连接多个正则表达式，但执行命令后抓取数据失败，这是因为 | 是扩展表达式，我们需要使用egrep命令才能用 | 连接多个判断字符串进行数据抓取，为了便于记忆，我们可以使用统一命令grep -E
在这里插入图片描述
在这里插入图片描述
2）编辑/mnt/passwd文件，在其中加入几行数据用来进行命令测试
在这里插入图片描述
3）使用grep命令过滤passwd文件中root关键字所在的行、使用-i 参数忽略大小写过滤passwd文件中root关键字所在的行，可以看到过滤结果中多了一条含有ROOT字符串的行
在这里插入图片描述
4）使用grep -E命令过滤passwd文件中root字符前没有字符的行、root字符后没有字符的行
注意： grep使用"<“或”>"只能抓取匹配字符串之前或之后不能有字符串的数据，像/root也会被查找出来，这是因为/为单个字符，而不是字符串
在这里插入图片描述
5）使用grep命令过滤passwd文件中ROOT关键字所在行及其上、下5行；使用grep命令过滤passwd文件中ROOT关键字所在行并显示行号；使用grep命令过滤显示passwd文件中ROOT关键字所在行及下面3行；使用grep命令过滤显示passwd文件中ROOT关键字所在行及上面3行
在这里插入图片描述
6）使用-v参数反向过滤passwd文件中不含有root关键字的行
在这里插入图片描述
7）命令练习：过滤passwd文件中行首、行尾不以root开头、结尾，行中有root关键字的行并显示
在这里插入图片描述

3）grep命令字符数量匹配规则
正则表达式 含义
^westos 以westos关键字开头
westos$ 以westos结尾</
最低0.47元/天 解锁文章
是大姚呀
关注
专栏目录
find和三剑客grep、sed、awk详解
Elltor
08-10 1475
三剑客
Linux 三剑客实例详解「grep、sed 、awk」
lanse_rain的专栏
05-10 598
简介 Linux 操作文本的三大利器分别是grep、sed 、awk，简称三剑客。 大师兄 awk：最擅长取列；二师兄 sed：最擅长取行；三师兄 grep：最擅长过滤。 正则表达式 元字符 功能 说明 ^ 匹配行首 表示以某个字符开头 $ 匹配行尾 表示以某个字符结尾 ^$ 空行 表示空行 . 匹配任意单个字符，包括 0 次 表示匹配一个非换行符的任意字符 * 匹配 0 个或多个字符 表示可重复的任意多个.
grep awk sed 用法（shell三剑客）
weixin_50663202的博客
10-05 243
#################################################### （-i 替换） &代表了nologin
Linux命令：grep awk sed详解
destiny的专栏
10-17 476
1、grep grep [options] regex [file...] regex 是指一个正则表达式 -i : 忽略大小写。不会区分大小写字符。也可用–ignore-case 来指定。 -v : 不匹配。通常，grep 程序会打印包含匹配项的文本行。这个选项导致 grep 程序只会打印不包含匹配项的文本行。也可用–invert-match 来指定。 -c : 打印匹配的数量（或者...
linux常用命令之 sed grep awk
liuhuashui123的专栏
01-24 357
sed经常用法： 1、替换和修改 sed -n 's/item/pre_item &/p' quot.txt 原内容：have a item 执行后：have a pre_item item 2、从文本读文件附加到令以文本后  sed '/Miss./r tmp.txt' quote.txt 将文本quote.txt中Miss所在行后附加tmp.txt内容。 3、处理控制符 se
grep awk sed常用用法
u012485320的专栏
12-11 553
1. grep简介 grep （global search regular expression(RE) and print out the line,全面搜索正则表达式并把行打印出来）是一种强大的文本搜索工具，它能使用正则表达式搜索文本，并把匹配的行打印出来。Unix的grep家族包括grep、egrep和fgrep。egrep和fgrep的命令只跟grep有很小不同。egrep是grep的扩
awk sed grep 详解
aijye88008的专栏
12-13 160
Linux的文本处理工具浅谈 awk 【功能说明】 用于文本处理的语言（取行，过滤），支持正则 NR代表行数，$n取某一列，$NF最后一列 NR==20,NR==30 从20行到30行 FS竖着切，列的分隔符 RS横着切，行的分隔符 【语法格式】 awk [–F] [“[分隔符]”] [’{print$1，$NF}’] [目标文件] ...
Linux文本处理命令常用用法总结：grep，cut，awk，sed
keith6785753的博客
07-20 1181
1.grep 提取符合条件的行 常用用法： grep +字符内容 +文件名 ：直接筛选文件中带有指定字符内容的行 grep -v 字符内容 +文件名：-v取反 取文件中除了带有指定字符内容的行 2.cut 提取符合条件的列 常用参数： -f 列号：提取第几列 -d 分隔符：按照指定分隔符分割列 示例1： 原文件： 使用cut -f 列数 文件名 提取指定列内容（注意：默认分隔符是tab键） 示例2： 原文件是/etc/passwd 使用cut -d 指定分隔符是“：”然后提取1，3列内容 示例
Linux的文本三剑客awk、sed、grep及其他文本处理命令，详细解析
cylcylccyyll的博客
07-14 716
s的使用为s/旧/新/，/([a-z]+)([a-z]+)([a-z]+)/为在echo处匹配到的，位置分别为123，/\3\2\1/是将前面的位置变成321“\”为转义字符，可以让其后面的内容原样输出。name[$1]拿$1做字段key让$2做value，如果这个数组里面有key，就累加，初始值是0+value，END是文件里所有的行都处理完了，最后去执行end部分的命令，end里面的只执行一次。egrep相当于grep-E支持扩展正则，-o只会输出你所匹配到的，不匹配的不输出。......
Linux三剑客grep, awk, sed：高效文本处理与搜索工具详解
本文档深入讲解了Linux系统中三个强大的文本处理工具：grep、awk和sed，它们在日常运维和开发过程中发挥着关键作用，特别是对于文本内容的搜索、过滤和格式化。这些工具都支持逐行处理，使得在大量数据中快速定位...
Linux 三剑客 Awk、Sed、Grep 命令详解
08-17
Linux 三剑客 Awk、Sed、Grep 命令详解 AWK 命令详解 AWK（Aho, Weinberger, and Kernighan）是一种功能强大的文本处理语言，主要用于处理文本和数据。它可以从标准输入、文件或其他命令的输出中读取数据，并对其...
awk、grep、sed
weixin_30898109的博客
08-02 79
awk、grep、sed是linux操作文本的三大利器，也是必须掌握的linux命令之一。三者的功能都是处理文本，但侧重点各不相同，其中属awk功能最强大，但也最复杂。grep更适合单纯的查找或匹配文本，sed更适合编辑匹配到的文本，awk更适合格式化文本，对文本进行较复杂格式处理。 以下所有实验输出，均以测试文件test.log内容为基准： 20170102 admin...
awk,sed,grep
时光凉春衫薄的博客
08-20 215
awk是行处理器: 相比较屏幕处理的优点，在处理庞大文件时不会出现内存溢出或是处理缓慢的问题，通常用来格式化文本信息 awk处理过程:依次对每一行进行处理，然后输出 awk命令形式: awk [-F|-f|-v] ‘BEGIN{} //{command1; command2} END{}’ file [-F|-f|-v] 大参数，-F指定分隔符，-f调用脚本，-v定义变量 var=value ' ' 引用代码块 BEGIN 初始化代码块，在对每一行进行处理之前，初...
linux-grep awk sed
进击的Coder，Fighting！
05-07 697
grep awk sed 简单使用介绍GREP功能linux中查看文件内容可以用more，tail，cat甚至vi等等，但是经常只需要检索文件中含有某些内容的行，而且文件可能有上千上万行，则前面几种工具会很崩溃，然而grep和awk则可以很容易的从文件中检索到你所需要的内容。用法 grep [options] ‘表达式’ 文件列表或文件夹路径 选项 option 功能 -c 输
awk & sed & grep
最新发布
angelazhao620的博客
11-30 605
awk 基础格式 分隔符 基本流程 内置变量 自定义变量
awk sed grep 详解
TH_lsq的博客
12-10 344
Linux的文本处理工具浅谈 awk 【功能说明】 用于文本处理的语言（取行，过滤），支持正则 NR代表行数，n取某一列，n取某一列，n取某一列，NF最后一列 NR20,NR30 从20行到30行 FS竖着切，列的分隔符 RS横着切，行的分隔符 【语法格式】 awk [–F] [“[分隔符]”] [’{print1，1，1，NF}’] [目标文件] awk ‘BEGIN{FS=...
awk，sed，grep三剑客
Beckham的博客
08-24 365
一.grep过滤 grep --help: 匹配模式选择： Regexp selection and interpretation: -E, --extended-regexp 扩展正则 -F, --fixed-strings PATTERN is a set of newline-separated fixed strings -G, --basic-rege...
Linux命令之grep/sed/awk等行转列
weixin_34346099的博客
08-07 136
行转列样例文件如下 cat file.txt a b c d e f g h i 1、cat file.txt |xargs -n1 2、xargs -n 1 < file.txt 3、tr " " "\n" < file.txt 4、sed 's/ /\n/g' file.txt此命令在Linux上执行正常，在Mac上...
shell命令之awk、sed和grep
狂奔的蜗牛
02-15 938
shell命令之awk、sed和grep命令的使用 题目出处:https://www.hackerrank.com/domains/shell/grep-sed-awk/page:1
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值