shell三剑客sed和awk

最新推荐文章于 2024-09-05 15:43:18 发布

zzn0109

最新推荐文章于 2024-09-05 15:43:18 发布

阅读量500

点赞数 1

文章标签： linux

本文链接：https://blog.csdn.net/zzn0109/article/details/124724845

版权

本文详细介绍了Linux中两个重要的文本处理工具——sed和awk。sed主要用作行编辑器，通过缓存区处理文本，支持多种操作如输出、删除、替换和迁移文本。awk则是一个功能强大的文本分析工具，可以处理复杂的匹配和操作，包括内置变量、逻辑运算和函数。文章通过实例展示了这两个命令的常见用法，适用于自动化任务和shell脚本编写。

摘要由CSDN通过智能技术生成

一、sed 命令

1.1 sed的概况

sed 为行编辑器，是处理文件行的编译器。sed是从文件中读取行，处理行，输出行。每当处理一行时会先把处理的行储存在临时缓存区中，也称为模式空间。接着用sed的命令去处理缓存区的内容等到处理完缓存区的内容后最后会把缓存区的内容送到屏幕。

sed可以读取文本并按照需求对文本进行编辑，所以可以运用在无交互的情况下对文件进行处理常常被广泛运用于shell脚本中去完成一些自动化任务。

1.2 sed的原理

1.3 sed 命令的用法

结构：

sed 【选项】 '操作' 参数

1.3.1 常见的选项

选项	功能
-e	用指定的命令或脚本来处理文件
-f	用指定的脚本文件来处理文件
-n	仅显示处理后的结果
-i	对文件处理直接修改
-r	使用扩展正则表达式
-s	将多个文件当作独立的文件
-h	帮助

1.3.2 常见的操作

操作	功能
a	在当前行下增加内容
c	替换选定行的内容
d	删除指定行
i	在指定行上插入一行内容
p	打印内容
s	替换指定的内容
y	字符转换

1.4 sed 用法实例

1.4.1输出条件的文本

①输出指定的文本

②输出3-6行

③输出所有的奇数行

④输出所有偶数行

⑤输出含有root的行

⑥显示包含root的行

⑦输出以nologin结尾的行

1.4.2 删除条件文本

①删除第五行（nl为文件计数行数）

②删除5-10行

③删除包含root的行

④删除以a-e字母开头的行

1.4.3 替换文本内容

①把文中的每一行第一个root替换成ROOT

②把每行第二个t替换成T

③把所有行的t换成T（g表示全局的意思）

④在每一行首行插入#

⑤将含有root的行中的oo改为ee

⑥在含有root的行上加上new(i)

⑦在含有root的行下插入new(a)

1.4.4 迁移文本

常用参数：

H 复制到剪贴板

g，G 将复制内容粘贴

w 保存到某个文件

r 读取某个文件

a 追加指定内容

i 忽略大小写

d 删除

①将含有root的行剪贴到最后结尾

②把1-3行剪贴到第七行后

③将文件/etc/hostname的内容添加到含有root的行后

④在第三行下加入ww换行www内容

⑤将含有root的行保存到/home/ss

1.4.5 直接修改内容（-i）

例如：sed -i ‘s/root/ROOT/’ /etc/passwd

把root修改成大写的ROOT 这是对文件免交互的修改

所以我们再修改前要-i.bak 进行备份防止修改错误改不回去

二、awk命令

在 Linux/UNIX 系统中，awk 是一个功能强大的编辑工具，逐行读取输入文本，并根据指定的匹配模式进行查找，对符合条件的内容进行格式化输出或者过滤处理，可以在无交互的情况下实现相当复杂的文本操作，被广泛应用于 Shell 脚本，完成各种自动化配置任务。

2.1 常用格式

awk可以直接处理目标文件，也可以通过-f 去读取脚本对目标文件进行处理

格式：

awk 选项 ‘条件{指令}’ 文件1 文件2 过滤并输出文件符合条件的内容

awk -f 脚本文件文件1 文件2 从脚本中调用编辑的指令，并且过滤输出内容

在使用 awk 命令的过程中,可以使用逻辑操作符“&&”，表示“与”， “||”表示“或”，“！”表示“非”；还可

以进行简单的数学运算，如+、-、*、/、%、^分别表示加、减、乘、除、取余和乘方。

2.2 awk的内置变量

变量	功能
FS	指定每行文本的字符分隔符，默认为空格或者制表位
NF	当前处理的行的字段个数
NR	当前处理的行的行号
$0	当前处理的行的整行的内容
$n	当前处理行的第n个字段
FILENAME	被处理文件的名字
RS	数据记录分隔，默认为\n