Linux三剑客（grep、sed、awk）_linux三剑客是什么意思(1)

最新推荐文章于 2024-10-01 22:54:40 发布

2401_87021503

最新推荐文章于 2024-10-01 22:54:40 发布

阅读量798

点赞数 29

文章标签： linux 服务器运维

本文链接：https://blog.csdn.net/2401_87021503/article/details/141981113

版权

| lele{n,m} | 义同上，但lele出现次数在n与m之间 | 从功能也可以看出 |

三剑客的功能非常强大，但我们只需要掌握他们分别擅长的领域即可：grep****擅长查找功能，sed擅长取行和替换。awk擅长取列。

二、grep

文本过滤(模式：pattern)工具，grep, egrep

`grep [OPTIONS] PATTERN [FILE...]`

--color=auto 对匹配到的文本着色显示
-v 显示不被pattern匹配到的行
-i 忽略字符大小写
-n 显示匹配的行号
-c 统计匹配的行数
-o 仅显示匹配到的字符串
-q 静默模式，不输出任何信息
-A # after, 后#行
-B # before, 前#行
-C # context, 前后各#行
-e 实现多个选项间的逻辑or关系
grep –e ‘cat ’ -e ‘dog’ file
-w 匹配整个单词
-E 使用ERE,相当于egrep
-F 相当于fgrep，不支持正则表达式

举例子：

1、查找文件内容包含root的行数

2、查找文件内容不包含root的行

3、查找以s开头的行

4、查找以n结尾的行

三、sed

sed是一种流编辑器，它一次处理一行内容。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。然后读入下行，执行下一个循环。如果没有使诸如‘D’ 的特殊命令，那会在两个循环之间清空模式空间，但不会清空保留空间。这样不断重复，直到文件末尾。文件内容并没有改变，除非你使用重定向存储输出。

`sed [option]... 'script' inputfile`

选项
- -n 不输出模式空间内容到屏幕，即不自动打印
- -e 多点编辑
- -f /PATH/SCRIPT_FILE: 从指定文件中读取编辑脚本
- -r 支持使用扩展正则表达式
- -i 直接编辑文件
- -i.bak 备份文件并原处编辑
script 地址定界
1. 不给地址：对全文进行处理
2. 单地址：
  #: 指定的行，$：最后一行
  /pattern/：被此处模式所能够匹配到的每一行
3. 地址范围：
  #,#
  #,+#
  /pat1/,/pat2/
  `#,/pat1/
4. ~：步进
  1~2 奇数行
  2~2 偶数行
编辑命令：
- d 删除模式空间匹配的行，并立即启用下一轮循环
- p 打印当前模式空间内容，追加到默认输出之后
- a [\]text1 在指定行后面追加文本,支持使用\n实现多行追加
- i [\]text 在行前面插入文本
- c [\]text 替换行为单行或多行文本
- w /path/somefile 保存模式匹配的行至指定文件
- r /path/somefile 读取指定文件的文本至模式空间中匹配到的行后
- = 为模式空间中的行打印行号
- ! 模式空间中匹配行取反处理
- s///：查找替换,支持使用其它分隔符，s@@@，s###
  替换标记：
  - g 行内全局替换
  - p 显示替换成功的行
  - w /PATH/TO/SOMEFILE 将替换成功的行保存至文件中

举例子：

1、打印出文件第二行

2、打印出2-5行的内容

3、将文件中的root全部替换为abc

直接修改读取的文件内容，而不是输出到终端。
s ：取代，可以直接进行取代的工作。

g: 是全局的意思。其中#是格式符，他也可以是@或者别的/。

Sed替换格式是：sed -i ‘s/要替换的内容/替换成的内容/g’ 文件名。

四、awk

报告生成器，格式化文本输出,有多种版本：New awk（nawk），GNU awk（ gawk）

`awk [options] 'program' file…`

program:pattern{action statements;…}
1. pattern部分决定动作语句何时触发及触发事件
  BEGIN,END
2. action statements对数据进行处理，放在{}内指明
  print, printf
选项：
-F 指明输入时用到的字段分隔符
-v var=value 自定义变量
分割符、域和记录
awk执行时，由分隔符分隔的字段（域）标记1,1,2…n称为域标识，n称为域标识，0为所有域。
省略action，则默认执行 print $0 的操作。
变量
FS:输入字段分隔符；OFS：输出字段分隔符；RS：输入记录分隔符；ORS：输出记录分隔符；NF：字段数量；NR:记录号；NFR：各文件分别计数，记录号。FILENAME：当前文件名；ARGC：命令行的参数；ARGV：数组，保存的是命令行所给定的各参数。

注意：以上都是内置变量，在引用时不需要前面加$，每新建一个变量，都需要加个-v,与变量名之间有无空格都可以，变量可以在引用之后再声明，但那一行的输出会输出空行。

printf命令
printf “FORMAT” , item1, item2, ... 不会自动换行，FORMAT中需要分别为后面每个item指定格式符。
- 格式符

格式符	item表现形式
%c	显示字符的ASCII码
%d, %i	显示十进制整数
%e, %E	显示科学计数法数值
%f	显示为浮点数
%g, %G	以科学计数法或浮点形式显示数值
%s	显示字符串
%u	无符号整数
%%	显示%自身

* 修饰符

最全的Linux教程，Linux从入门到精通

======================

linux从入门到精通(第2版)
Linux系统移植
Linux驱动开发入门与实战
LINUX 系统移植第2版
Linux开源网络全栈详解从DPDK到OpenFlow

华为18级工程师呕心沥血撰写3000页Linux学习笔记教程

第一份《Linux从入门到精通》466页

====================

内容简介

====

本书是获得了很多读者好评的Linux经典畅销书**《Linux从入门到精通》的第2版**。本书第1版出版后曾经多次印刷，并被51CTO读书频道评为“最受读者喜爱的原创IT技术图书奖”。本书第﹖版以最新的Ubuntu 12.04为版本，循序渐进地向读者介绍了Linux 的基础应用、系统管理、网络应用、娱乐和办公、程序开发、服务器配置、系统安全等。本书附带1张光盘，内容为本书配套多媒体教学视频。另外,本书还为读者提供了大量的Linux学习资料和Ubuntu安装镜像文件，供读者免费下载。

华为18级工程师呕心沥血撰写3000页Linux学习笔记教程