awk详解

于 2024-08-11 02:59:01 发布
阅读量552 收藏 8
点赞数 15
文章标签： linux 服务器 bash 开发语言 chrome
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/xw2441176267/article/details/141099777
版权

文章目录

一、概述

​ AWK 是一种处理文本文件的语言，是一个强大的文本分析工具。它是专门为文本处理设计的编程语言，也是行处理软件，通常用于扫描、过滤、统计汇总工作。数据可以来自标准输入也可以是管道或文件。

​ 20世纪70年代诞生于贝尔实验室，现在centos7用的是gawk之所以叫 AWK 是因为其取了三位创始人 Alfred Aho，Peter Weinberger, 和 Brian Kernighan 的 Family Name 的首字符。AWK：Aho, Weinberger, Kernighan，报告生成器，格式化文本输出，GNU/Linux发布的AWK目前由自由软件基金会（FSF）进行开发和维护，通常也称它为 GNU AWK。

有多种版本：

  • AWK：原先来源于 AT & T 实验室的的AWK
  • NAWK：New awk，AT & T 实验室的AWK的升级版
  • GAWK：即GNU AWK。所有的GNU/Linux发布版都自带GAWK，它与AWK和NAWK完全兼容

二、工作原理

​ 当读到第一行时，匹配条件，然后执行指定动作，再接着读取第二行数据处理，不会默认输出。如果没有定义匹配条件默认是匹配所有数据行，awk隐含循环，条件匹配多少次动作就会执行多少次。逐行读取文本，默认以空格或tab键为分隔符进行分隔，将分隔所得的各个字段保存到内建变量中，并按模式或者条件执行编辑命令。sed命令常用于一整行的处理，而awk比较、倾向于将一行分成多个"字段"然后再进行处理。awk信息的读入也是逐行读取的，执行结果可以通过print的功能将字段数据打印显示。在使用awk命令的过程中,可以使用逻辑操作符" &&“表示"与”、“||表示"或”、"!“表示非”;还可以进行简单的数学的运算，如+、一、、/、%、^分别表示加、减、乘、除、取余和乘方。

三、工作流程

man gawk----》pattern scanning and processing language 模式扫描和处理语言。
pattern [ˈpætn] 模式 ； process [ˈprəʊses] 处理
任何 awk 语句都是由模式和动作组成，一个 awk 脚本可以有多个语句。模式决定动作语句的触发条件和触发时间。在 linux 上常用的是 gawk,awk 是 gawk 的链接文件。awk---->gawk 即： gun awk

[root@benet22 opt]# which awk
/usr/bin/awk
[root@benet22 opt]# ll which awk
lrwxrwxrwx. 1 root root 4 8月 19 2022 /usr/bin/awk -> gawk

image-20240725135619375

3.1 运行模式

正则表达式 : /root/ 匹配含有 root 的行 /.root/
关系表达式： < > && || + *
匹配表达式： ~ ！~
动作：变量 命令 内置函数 流控制语句它的语法结构如下：

3.2 执行流程

BEGIN 语句设置计数和打印头部信息，在任何动作之前进行。END 语句输出统计结果，在完成动作之后执行。AWK执行的流程非常简单：读（Read）、执行（Execute）与重复（Repeat）。下面的流程图描述出了AWK的工作流程：

awk [options] 'BEGIN{ print "start" } ‘pattern{ commands }’ END{ print "end" }' file

其中：BEGIN END 是 AWK 的关键字部，因此必须大写；这两个部分开始块和结束块是可选的。

从上图我们已经了解了AWK程序的工作流程。接下来我们来看一看AWK程序的结构。顾名思义，开始块就是在程序启动的时候执行的代码部分，并且它在整个过程中只执行一次。一般情况下，我们在开始块中初始化一些变量。BEGIN是AWK的关键字，因此它必须是大写的。不过，开始块部分是可选的，你的程序可以没有开始块部分。对于每一个输入的行，都会执行一次主体部分的命令。默认情况下，对于输入的每一行，AWK都会执行命令。注意：在主体块部分，没有关键字存在。它是在程序结束时执行的代码。END也是AWK的关键字，它也必须大写。与开始块相似，结束块也是可选的。

通过上面我们可以知道AWK 它工作通过三个步骤：

  1. 读（Read）：从文件、管道或标准输入中读入一行然后把它存放到内存中
  2. 执行（Execute）：对每一行数据，根据 AWK 命令按顺序执行。默认情况是处理每一行数据，也可以指定模式
  3. 重复（Repeat）：一直重复上述两个过程直到文件结束

四、基本语法

4.1 命令格式

awk 选项' 模式或条件{操作}' 文件1 文件2 ...
awk -f 脚本文件 文件1 文件2 ..

格式：awk关键字 选项 命令部分 ‘{xxxx}’ 文件名

AWK 支持两种不同类型的变量：内建变量(可直接使用)，自定义变量awk 内置变量（预定义变量）如下所示：

  • FS：指定每行文本的字段分隔符，默认为空格或制表位。
  • NF：当前处理的行的字段个数。在执行过程中对应于当前的字段数，NF：列的个数
  • NR：当前处理的行的行号（序数）。 在执行过程中对应于当前的行号
  • $0：当前处理的行的整行内容。
  • $n：当前处理行的第 n 个字段（第 n 列）。比如: $1 表示第一个字段，$2 表示第二个字段
  • FILENAME：被处理的文件名(当前输入文件的名)。
  • FNR 各文件分别计数的行号
  • OFS 输出字段分隔符（默认值是一个空格）
  • ORS 输出记录分隔符（默认值是一个换行符）
  • RS:行分隔符。awk从文件上读取资料时,将根据Rs的定义把资料切割成许多条记录, 而awk一次仅读入一条记录,以进行处理。预设值是" \n’

简说：数据记录分隔，默认为\n，即每行为一条记录。

五、实战案例

5.1 开始块（BEGIN block）

主体块（Body Block）结束块（END Block）

内建变量

awk 包含几个特殊的内建变量（可直接用）如下所示：

  • FS：指定每行文本的字段分隔符，默认为空格或制表位。
  • NF：当前处理的行的字段个数。
  • NR：当前处理的行的行号（序数）。
  • $0：当前处理的行的整行内容。
  • $n：当前处理行的第 n 个字段（第 n 列）。
  • FILENAME：被处理的文件名。
  • RS:行分隔符。awk从文件上读取资料时,将根据Rs的定义把资料切割成许多条记录, 而awk一次仅读入一条记录,以进行处理。预设值是" \n’

简说：数据记录分隔，默认为\n，即每行为一条记录

5.1.1print

[root@localhost ~]#awk 'patterm{action}'
[root@localhost ~]#awk ' '

什么都不写 空没有效果

image-20240725135951912

[root@localhost ~]#awk '{print}'

在打印一遍

dd
dd

image-20240725140039786

[root@localhost ~]#awk '{print "hello"}'

字符串需要添加双引号，单引号已被使用

1
hello
1
hello

image-20240725140150442

[root@localhost ~]#awk '{print "hello"}' < /etc/passwd
[root@localhost ~]# cat /etc/passwd | head -10 > zz
[root@localhost ~]# awk '{print}' zz

image-20240725140402511

[root@localhost ~]# awk '{print $1}' zz

root:x:0:0:root:/root:/bin/bash

awk默认把这一行当做一列，因为没有被空格分隔，awk默认以空格或tab键分隔

bin:x:1:1:bin:/bin:/sbin/nologin

image-20240725145313469

5.2 内置变量

awk常用内置变量：$1、$2

、NF、NR、$0

  • $1：代表第一列
  • $2：代表第二列以此类推
  • $0：代表整行
  • NF：一行的列数
  • NR：行数
[root@localhost ~]# awk -F: '{print $5}' zz

自定义冒号为分隔符显示分隔之后的第五列

root
bin

[root@localhost ~]# awk -Fx '{print $1}' /etc/passwd

用x作为分隔符

root:

image-20240725145529230

[root@localhost ~]# awk '{print $1 $2}' zz

helloworld

[root@localhost ~]# awk '{print $1""$2}' zz

显示一个空格，空格需要用双引号引起来，如果不用引号默认以变量看待，如果是常量就需要双引号引起来

hello world

[root@localhost ~]# awk '{print $1,$2}' zz

逗号有空格效果

hello world

image-20240725145814677

[root@localhost ~]# awk -F: '{print $1"\t"$2}' /etc/passwd

用制表符作为分隔符输出

[root@localhost ~]# awk -F[:/] '{print $9}' zz

定义多个分隔符，只要看到其中一个都算作分隔符

image-20240725150112484

[root@localhost ~]# awk -F: '/root/{print $0}' pass.txt

打印包含root的整行内容

[root@localhost ~]# awk -F: '/root/{print $1}' pass.txt

打印包含root的行的第一列

root

[root@localhost ~]# awk -F: '/root/{print $1,$6}' pass.txt

打印包含root的行的第一列和第六列

root /root

[root@localhost ~]# awk '/root/' /etc/passwd

root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin

image-20240725150616173

输出shadow文件中以冒号分隔的第二列有感叹号的行的第一列

image-20240725151057078

[root@localhost ~]# awk -F[:/] '{print NF}' zz

打印每一行的列数

[root@localhost ~]# awk -F[:/] '{print NR}' zz

显示行号

image-20240725151348884

[root@localhost ~]# awk -F: '{print NR}' pass.txt

[root@localhost ~]# awk -F: '{print NR,$0}' pass.txt

[root@localhost ~]# awk 'NR==2' /etc/passwd

打印第二行，不加print也一样，默认就是打印

[root@localhost ~]# awk 'NR==2{print}' /etc/passwd

image-20240725152221839

[root@localhost ~]# awk -F: 'NR==2{print $1}' /etc/passwd
[root@localhost ~]# awk -F: '{print $NF}' /etc/passwd

打印最后一列

[root@localhost ~]# awk 'END{print NR}' /etc/passwd

打印总行数

[root@localhost ~]# awk 'END{print $0}' /etc/passwd

打印文件最后一行

image-20240725152709276

[root@localhost ~]# awk -F: '{print "当前行有"NF"列"}' zz

[root@localhost ~]# awk -F: '{print "第"NR"行有"NF"列"}' /etc/passwd

第几行有几列

image-20240725153213203

扩展生产案例：网卡的ip、流量

5.3 BEGIN END 运算

逐行执行开始之前执行什么任务，结束之后再执行什么任务，用BEGIN、END。BEGIN一般用来做初始化操作，仅在读取数据记录之前执行一次。END一般用来做汇总操作，仅在读取完数据记录之后执行一次。

5.3.1 扩展生产：网卡的ip、流量

[root@localhost ~]# ifconfig ens33 | awk '/netmask/{print "本机的ip地址是"$2}'

$本机的ip地址是192.168.245.211

[root@localhost ~]# ifconfig ens33 | awk '/RX p/{print $5"字节"}'

8341053字节

image-20240725160006321

5.3.2 根分区的可用量

[root@localhost ~]# df -h | awk 'NR==2{print $4}'

image-20240725160340610

5.3.3 awk的运算：

[root@localhost ~]# awk 'BEGIN{x=10;print x}'

如果不用引号awk就当作一个变量来输出了，所以不需要加$了。

[root@localhost ~]# awk 'BEGIN{x=10;print x+1}'

BEGIN在处理文件之前，所以后面不跟文件名也不影响

[root@localhost ~]# awk 'BEGIN{x=10;x++;print x}'

[root@localhost ~]# awk 'BEGIN{print x+1}'

不指定初始值，初始值就为0，如果是字符串，则默认为空

[root@localhost ~]# awk 'BEGIN{print 2.5+3.5}'

小数也可以运算

[root@localhost ~]# awk 'BEGIN{print 2-1}'

[root@localhost ~]# awk 'BEGIN{print 3*4}'

[root@localhost ~]# awk 'BEGIN{print 32}'

[root@localhost ~]# awk 'BEGIN{print 2^3}'

[root@localhost ~]# awk 'BEGIN{print 1/2}'

image-20240725161242696

[root@localhost ]# awk -F: '/root/' /etc/passwd

如果后面有具体打印多少列就没法省略print了

模糊匹配，用表示包含，!~表示不包含

[root@localhost ]# awk -F: '$1~/root/' /etc/passwd

[root@localhost ]# awk -F: '$1~/ro/' /etc/passwd

模糊匹配，只要有ro就匹配上

[root@localhost ]# awk -F: '$7!~/nologin$/{print $1,$7}' /etc/pass

wd

image-20240725161842207

关于数值与字符串的比较
比较符号：== != <= >= < >

5.3.4案例

[root@localhost ~]# awk 'NR==5{print}' /etc/passwd

[root@localhost ~]# awk 'NR==5' /etc/passwd

[root@localhost ~]# awk 'NR<5' /etc/passwd

[root@localhost ~]# awk -F: '$3==0' /etc/passwd

[root@localhost ~]# awk -F: '$1==root' /etc/passwd
[root@localhost ~]# awk -F: '$1=="root"' /etc/passwd

精确匹配一定是root

image-20240725162406327

[root@localhost ~]# awk -F: '$3>=1000' /etc/passwd

image-20240725162713344

逻辑运算 && ||
&& 和 || 是逻辑运算符，用于组合多个条件并控制程序流程。
&& 要求所有条件都为真时才为真，否则为假。
|| 只要有一个条件为真就为真，全为假时才为假。

[root@localhost ~]# awk -F: '$3<10 || $3>=1000' /etc/passwd
[root@localhost ~]# awk -F: '$3>10 && $3<1000' /etc/passwd
[root@localhost ~]# awk -F: 'NR>4 && NR<10' /etc/passwd

image-20240725162944359

image-20240725163046086

image-20240725163150951

5.3.5 案例

打印1-200之间所有能被7整除并且包含数字7的整数数字

[root@localhost ]# seq 200 | awk '$1%7==0 && $1~/7/'

image-20240725163812495

其他内置变量的用法FS（输入）、OFS、NR、FNR、RS、ORS

  • FS：输入字段的分隔符 默认是空格
  • OFS：输出字段的分隔符 默认也是空格
  • FNR：读取文件的记录数（行号），从1开始，新的文件重新重1开始计数
  • RS：输入行分隔符 默认为换行符
  • ORS：输出行分隔符 默认也是为换行符

5.3.6 FS

[root@localhost ~]# awk 'BEGIN{FS=":"}{print $1}' pass.txt

在打印之前定义字段分隔符为冒号

5.3.7 OFS

[root@localhost ~]# awk 'BEGIN{FS=":";OFS="---"}{print $1,$2}' pass.txt

OFS定义了输出时以什么分隔，$1$2中间要用逗号分隔，因为逗号默认被映射为OFS变量，而这个变量默认是空格

image-20240725170613271

5.3.8 FNR

[root@localhost ~]# awk '{print FNR,$0}' /etc/resolv.conf /etc/hosts

可以看出FNR的行号在追加当有多个文件时

5.3.9 NR

[root@localhost ~]# awk '{print NR,$0}' /etc/resolv.conf /etc/hosts

image-20240725171352653

5.3.10 RS

[root@localhost ~]# awk 'BEGIN{RS=":"}{print $0}' /etc/passwd

RS:指定以什么为换行符，这里指定是冒号，你指定的肯定是原文里存在的字符

5.3.11 ORS

[root@localhost ~]# awk 'BEGIN{ORS=" "}{print $0}' /etc/passwd

把多行合并成一行输出，输出的时候自定义以空格分隔每行，本来默认的是回车键

image-20240725172813030

5.4 引用变量

[root@localhost ~]# a=100
[root@localhost ~]# awk -v b="$a" 'BEGIN{print b}'

将系统的变量a，在awk里赋值为变量b，然后调用变量b -v 选项将其传递给 awk

[root@localhost ~]# awk 'BEGIN{print "'$a'"}'

直接调用的话需要先用双引号再用单引号

image-20240811023859162

[root@localhost ~]# awk -vc=1 'BEGIN{print c}'

awk直接定义变量并引用

[root@localhost ~]# df -h | awk 'BEGIN{getline}/root/{print $0}'

调用函数getline，读取一行数据的时候并不是得到当前行而是当前行的下一行

image-20240811024100245

[root@localhost ~]# seq 10 | awk '{getline;print $0}'

显示偶数行

2
4
6
8
10

image-20240811024242503

[root@localhost ~]# seq 10 | awk '{print $0;getline}'

显示奇数行

1
3
5
7
9

image-20240811024332037

[root@localhost ~]# awk -F: '{if($3<10){print $0}}' /etc/passwd

image-20240811024456975

第三列小于10的打印整行

[root@localhost ~]# awk -F: '{if($3<10){print $3}else{print $1}}' /etc/passwd

image-20240811024612888

第三列小于10的打印第三列，否则打印第一列

第二步：从文件或标准输入(stdin)读取一行。然后运行pattern{ commands }语句块，它逐行扫描文件，从第一行到最后一行反复这个过程。直到文件所有被读取完成。

第三步：当读至输入流末尾时，运行END{ commands }语句块。BEGIN语句块在awk开始从输入流中读取行之前被运行，这是一个可选的语句块，比方变量初始化、打印输出表格的表头等语句通常能够写在BEGIN语句块中。END语句块在awk从输入流中读取全然部的行之后即被运行。比方打印全部行的分析结果这类信息汇总都是在END语句块中完毕，它也是一个可选语句块。pattern语句块中的通用命令是最重要的部分，它也是可选的。假设没有提供pattern语句块，则默认运行{ print }，即打印每个读取到的行。awk读取的每一行都会运行该语句块。这三个部分缺少任何一部分都可以。

5.4.1案例

[root@localhost ~]#awk 'BEGIN{x=0};//bin/bash$/ {x++;print x,$0};END {print x}' /etc/passwd

统计以/ bin/bash结尾的行数，等同于

[root@localhost ~]#grep -c "/bin/bash$" /etc/passwd

BEGIN模式表示，在处理指定的文本之前，需要先执行BEGIN模式中指定的动作; awk再处理指定的文本，之后再执行END模式中指定的动作，END{}语句块中，往往会放入打印结果等语句

[root@localhost ~]#awk -F ":" '! ($3<200){print} ' /etc/passwd

输出第3个字段的值，不小于200的行

image-20240811024833463

[root@localhost ~]#awk 'BEGIN {FS=":"} ;{if($3>=1000){print}}' /etc/passwd

先处理完BEGIN的内容，再打印文本里面的内容

[root@localhost ~]#awk -F ":" ' {max=($3>=$4) ?$3:$4; {print max}} ' /etc/passwd

(了解)($3>$4)?$3:$4三元运算符，如果第3个字段的值大于等于第4个字段的值，则把第3个字段的值赋给max，否则第4个字段的值赋给max

image-20240811024902717

[root@localhost ~]#awk -F ":" '{print NR,$0}' /etc/passwd

image-20240811024921936

输出每行内容和行号，每处理完一条记录，NR值加1

[root@localhost ~]#sed -n '=;p' /etc/passwd
[root@localhost ]#awk -F ":" '$7"bash"{print $1,47}' /etc/passwd

image-20240811024946347

image-20240811025002881

输出以冒号分隔且第7个字段中包含/bash的行的第1个字段

[root@localhost ~]#awk -F: '/bash/ {print $1}' /etc/passwd
[root@localhost ]#awk -F":"'($1"root") && (NF==7) {print $1,$2,$NF } '

image-20240811025026629

/etc/passwd第1个字段中包含root且有7个字段的行的第1、2个字段

[root@localhost ~]#awk -F ":" '($7!="/bin/bash")&&($7!="/sbin/nologin"){print} ' /etc/passwd

image-20240811025049624

输出第7个字段既不为/bin/bash，也不为/sbin/nologin的所有行

[root@localhost ~]#awk -F: '($NF !=" /bin/bash")&&($NF !=" /sbin/nologin" ){print NR, $0}' passwd

通过管道、双引号调用shell 命令:

[root@localhost ~]#echo $PATH | awk 'BEGIN{RS=":"};END {print NR}'

统计以冒号分隔的文本段落数，END{ }语句块中，往往会放入打印结果等语句

[root@localhost ~]#echo $PATH | awk 'BEGIN{RS=":"};{print NR,$0};END {print NR}'
[root@localhost ~]#awk -F: '/bash$/{print | "wc -l"}' /etc/passwd

image-20240811025124007

调用wc -l命令统计使用bash 的用户个数,等同于

[root@localhost ~]#grep -c "bash$" /etc/passwd
[root@localhost ~]#awk -F: '/bash$/ {print}' /etc/passwd | wc -l
[root@localhost ~]#free -m |awk '/Mem:/ {print int($3/($3+$4)100)"%"}'

image-20240811025209921

查看当前内存使用百分比

[ root@localhost ~]# free -m | awk '/Mem:/ {print $3/$2}'
0.327869
[root@localhost ~]# free -m | awk '/Mem:/ {print $3/$2100}'
32.7869
[ root@localhost ~]# free -m | awk '/Mem:/ {print int($3/$2100)}'
32
[root@localhost ~]# free -m | awk '/Mem:/ {print int($3/$2100)"%"}'
32%
[root@localhost ~]#free -m | awk '/Mem:/ {print $3/$2*100}' | awk -F. '{print $1"%"}'
top -b -n 1 | grep Cpu | awk -F ',' '{print $4}'| awk '{print $1}'

image-20240811025301515

查看当前CPU空闲率，(-b -n 1表示只需要1次的输出结果)

dao 100%
date -d "$(awk -F "." '{print $1}'/proc/uptime) second ago"+"%F%H:%M:%S"

了解显示上次系统重启时间，等同于uptime; second ago为显示多少秒前的时间，+$” 选日:3N:3S等同于+"3Y-n-%d 3日:8N:8S"的时间格式

date -d "$(awk -F "." '{iprint $1}'/proc/uptime) second ago"+"号F%H:%M:%S"

了解显示上次系统重启时间，等同于uptime; second ago为显示多少秒前的时间，+“F悉日:M::S"等同于+”%1-tm-d 日: 38:8S"的时间格式

awk 'BEGIN {n=0 ; while ("w" | getline) n++ ; {print n-2}}'

image-20240811025347090

调用w命令，并用来统计在线用户数

5.4.2注：先做如下实验

seq 10 | awk ' {getline; print $0 }'
seq 10 | awk ' { print $0 ; getline } '

awk 'BEGIN { "hostname" | getline ; {print $0}}'

image-20240811025418913

调用hostname,并输出当前的主机名

当getline左右无重定向符"<“或"I"时，awk首先读取到了第一行，就是1，然后getline，就得到了1下面的第二行，就是2，因为getline之后，awk会改变对应的NE，NR，FNR和 O 等内部变量，所以此时的 O等内部变量，所以此时的 O等内部变量，所以此时的O的值就不再是1，而是2了，然后将它打印出来。当getline左右有重定向符”<"或"I"时，getline则作用于定向输入文件，由于该文件是刚打开，并没有被awk读入一行,只是getline读入，那么getline返回的是该文件的第一行，而不是隔行。

5.5CPU使用率（算不）

cpu_us=top -b -n 1 | grep Cpu | awk '{print $2}'
cpu_sy=top -b -n 1 | grep Cpu | awk -F ',' '{print $2}' | awk '{print $1}'
cpu_sum=$(($cpu_us+$cpu_sy))
echo $cpu_sum
vmstat
echo "A B C D" | awk '{OFS="|"; print $0;$1=$1;print $0}'

A B C D
A|B|C|D

image-20240811025455334

$1=$1是用来激活$0的重新赋值，也就是说字段$1…和字段数NF的改变会促使awk重新计算$0的值,通常是在改变OFS后而需要输出$0时这样做

echo "A B C D" | awk 'BEGIN{OFS="|"};{print $0;$1=$1;print $0}'
echo "A B C D" | awk 'BEGIN{OFS="|"};{print $0;$1=$1;print $1,$2}'
echo "A B C D" | awk 'BEGIN{OFS="|"};{$2=$2;print $1,$2}'

image-20240811025526220

六、最后总结

grep 和 egrep 文本过滤 (更适合单纯的查找或匹配文本)
sed 流编辑器 实现编辑的(更适合编辑匹配到的文本)
e左右有重定向符"<"或"I"时，getline则作用于定向输入文件，由于该文件是刚打开，并没有被awk读入一行,只是getline读入，那么getline返回的是该文件的第一行，而不是隔行。

5.5CPU使用率（算不）

cpu_us=top -b -n 1 | grep Cpu | awk '{print $2}'
cpu_sy=top -b -n 1 | grep Cpu | awk -F ',' '{print $2}' | awk '{print $1}'
cpu_sum=$(($cpu_us+$cpu_sy))
echo $cpu_sum
vmstat
echo "A B C D" | awk '{OFS="|"; print $0;$1=$1;print $0}'

A B C D
A|B|C|D

在这里插入图片描述

$1=$1是用来激活$0的重新赋值，也就是说字段$1…和字段数NF的改变会促使awk重新计算$0的值,通常是在改变OFS后而需要输出$0时这样做

echo "A B C D" | awk 'BEGIN{OFS="|"};{print $0;$1=$1;print $0}'
echo "A B C D" | awk 'BEGIN{OFS="|"};{print $0;$1=$1;print $1,$2}'
echo "A B C D" | awk 'BEGIN{OFS="|"};{$2=$2;print $1,$2}'

在这里插入图片描述

六、最后总结

grep 和 egrep 文本过滤 (更适合单纯的查找或匹配文本)
sed 流编辑器 实现编辑的(更适合编辑匹配到的文本)
awk 文本报告生成器 实现格式化文本输出(更适合格式化文本，对文本进行较复杂格式处理)

爱吃糖的蠢猫
关注
  • 15
    点赞
  • 踩
  • 8
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
AWK详解
wq1205750492的博客
04-29 1万+
awk详解与使用
Shell awk详解
qq_35887546的博客
02-15 944
一、awk介绍 awk其名称得自于它的创始人 Alfred Aho 、Peter Weinberger 和 Brian Kernighan 姓氏的首个字母。实际上 AWK 的确拥有自己的语言： AWK 程序设计语言 ， 三位创建者已将它正式定义为“样式扫描和处理语言” 它允许您创建简短的程序，这些程序读取输入文件、为数据排序、处理数据、对输入执行计算以及生成报表，还有无数其他的功能。 awk 是一...
linux之awk详解
荷逸的博客
10-04 5059
awk不仅仅是Linux系统中的一个命令，而且其还是一种编程语言，可以用来处理数据和生成报告（Excel）。处理的数据可以是一个或多个文件，它是Linux系统最强大的文本处理工具，没有之一。
Awk详解
hidingin
08-23 790
1. awk基本原理 通过一个简短的命令，我们来了解其工作原理。 awk '{print $0}' /etc/passwd echo hhh|awk '{print "hello,world"}' awk '{ print "hiya" }' /etc/passwd 你将会见到/etc/passwd 文件的内容出现在眼前。现在，解释 awk 做了些什么。调用 awk时，我们指定/etc/passwd 作为输入文件。执行 awk 时，它依次对/etc/passwd 中的每一行执行 print 命令。
Linux实战awk详解
12-18
Linux实战awk详解主要聚焦在如何利用awk这一强大的命令行工具处理文本流问题。Awk是Linux/unix系统中用于处理结构化文本数据的强大工具，它能够解析、处理和格式化文本，尤其在日志分析、数据提取和报表生成等方面...
linux ，awk ，awk详解
09-15
awk 是一个强大的文本分析工具，尤其在 Linux 环境中广泛使用。它结合了正则表达式匹配、样式装入、流控制、数学运算、进程控制和内置变量与函数，使得处理文本数据变得非常高效。awk 可以看作是一种轻量级的编程...
linux正则表达式awk详解
12-13
awk和sed一样是流式编辑器，它也是针对文档中的行来操作的，一行一行的去执行。awk比sed更加强大，它能做到sed能做到的，同样也能做到sed不能做到的。awk常用来分段； awk不用加任何参数就可以实现 + ? * . | 这些...
linux awk详解awk详解awk详解awk详解
02-06
Linux awk 详解 awk 是一种功能强大的程序语言，主要用于处理文档资料。它的名称来自三个最初设计者的姓氏的第一个字母：Alfred V. Aho、Peter J. We i n b e rg e r 和 Brian W.Kernighan。awk 最初在 1977 年完成...
系统控制和管理接口：在Linux中利用电源和性能域进行平台资源抽象
最新发布
csdnsqst0046的博客
08-09 876
在本文中，您可以了解到如何利用我们的方法将复杂性从Linux驱动程序（需要为每个平台编写不同的开发程序）转移到固件。由于固件已经适配了平台，因此固件知道需要采取哪些手段来配置外设。您可以了解我们如何定义逻辑性能和电源域，而不是单独处理每个平台资源。您还可以了解到我们如何努力实现这一目标，以及您如何进行尝试并做出贡献。
【Linux】进程间通信：详解 VSCode使用 | 匿名管道
2301_80171004的博客
08-05 1094
本文将带你从Linux下VSCode的高效使用入手，探索进程间通信的基础概念，并深入讲解匿名管道的原理及其实现。从连接云服务器到编写代码，一步步掌握进程间通信
Linux安全与高级应用（四）深入探索MySQL数据库：安装、管理与安全实践
洛秋的博客
08-07 1422
Linux：作为操作系统，提供稳定的运行环境。Apache：作为Web服务器，处理HTTP请求。MySQL：作为数据库管理系统，存储和管理数据。：作为脚本语言，生成动态网页。LAMP平台的优势在于其成本低廉、可定制性强、易于开发、方便易用且安全稳定。这使得LAMP成为许多企业和开发者的首选平台。通过以上步骤，我们完成了LAMP平台的部署及其主要组件的配置和测试。LAMP平台的搭建不仅为Web开发提供了一个强大的环境，同时也展现了其在成本和效率上的优势。
如何解码Linux下事件响应工具evtest的时间戳
weixin_44199156的博客
08-08 318
这里放一下原文链接在开发input子系统驱动时，常常会使用evtest工具进行测试。evtest是打印evdev内核事件的工具，它直接从内核设备读取并打印设备描述的带有值和符号名的事件，可以用来调试鼠标、键盘、触摸板等输入设备evtest通常用于在X.org中调试输入设备的问题，evtest提供了内核的处理信息。根据这些信息，可以判断是内核问题还是X.org问题。输出数据中，“type”是input类型，可以是“EV KEY”、“EV SW”、“EV SND”、“EV LED”或数值；
在Linux中宏观的看待线程
2301_77479435的博客
08-07 404
在Linux中宏观的看待线程
【Linux 从基础到进阶】进程管理与性能调优
weixin_39372311的博客
08-08 404
通过本文的介绍，您已经了解了 Linux 系统中进程管理和性能调优的基本概念和操作方法。本文提供了适用于 CentOS 和 Ubuntu 系统的具体命令和示例，涵盖了 CPU、内存、I/O 和网络的性能调优策略。合理的进程管理和性能调优可以显著提升系统的稳定性和运行效率。如有任何问题或需要进一步的帮助，请参考CentOS 官方文档和Ubuntu 官方文档或在 CSDN 博客中查阅相关内容。
Linux Java服务管理脚本（启动、停止、查看状态）
程序员阿华的博客
08-08 149
Linux Java服务管理脚本（启动、停止、查看状态）
【Linux】docker和firewalld不兼容问题
qq_51228157的博客
08-07 304
系统下firewalld正常运行，安装仓库里的docker版本，安装后启动docker服务，查看firewalld服务，服务有warning信息。a.因为docker是容器技术，防火墙的状态经过修改，就得重启docker刷新状态。firewalld状态变更包括（开启、关闭、更改）此问题是docker和firewalld 的兼容问题，警告不影响业务本身。b.经过重启的docker后正常创建网络。docker出现网络创建失败问题。
Linux 调试之动态打印
Teminator_的博客
08-08 3983
在 kernel 驱动代码中，使用动态输出是系统内核调试的重要手段之一，printk打印是全局的，只能设置输出等级，而且使用printk每次都要重新编译内核，很不方便。。而动态输出可以在不需要重新编译内核的情况下，方便的打印出内核的 debug 信息。动态输出可以动态选择打开某个内核子系统的输出，可以有选择性地打开某些模块的输出，printk被dev_infodev_dbgdev_err之类的函数代替，dev_xxx函数的本质还是使用printk打印的，只是对printk进行了一层包装。
linux下常用java、nginx部署命令
hazhanglvfang的专栏
08-05 526
6.nohup java -jar -Dserver.port=8087 XXXX-web.jar spring.config.location=/home/XXXXXX/application.yml > uni.log & 指定外部文件部署且指定固定端口。24.修改nginx文件后 ，nginx -s reload 成功后没生效,这种情况下需要把nginx手动杀掉后 在启动。找到目前的文件，清空文件 ，有可能删除不管用rm-rf 文件名 ，需要清空文件 echo >文件名。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值