Linux命令awk

于 2023-07-18 21:31:53 发布
阅读量394 收藏
点赞数
分类专栏： linux 文章标签： linux shell
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/stormkai/article/details/131796775
版权

文章目录

Linux命令awk

将文件逐行读入，以空格为默认分隔符将每行切片，切开的部分再进行分析处理

基本用法：

awk [选项参数] ‘/pattern1/{action1} /pattern2/{action2}…’ filename

pattern: 表示awk再数据中查找的内容，就是匹配模式

action: 在找到匹配内容时所执行的一系列命令

选项参数说明：

-F: 指定输入文件分隔符

-v: 赋值一个用户定义变量

内置变量:

FILENAME: 文件名

NR: 已读的记录数（行号）

NF: 浏览记录的域的个数

1. 搜索/etc/passwd文件以root关键字开头的所有行，并输出该行的第7列

cat /etc/passwd | awk -F “:” ‘/^root/{print $7}’

[root@localhost jiaoben]# cat /etc/passwd | grep ^root
root:x:0:0:root:/root:/bin/bash
[root@localhost jiaoben]# cat /etc/passwd | grep ^root | cut -d ":" -f 7
/bin/bash
[root@localhost jiaoben]# cat /etc/passwd | awk -F ":" '/^root/{print $7}'
/bin/bash

2. 搜索/etc/passwd文件以root关键字开头的所有行，并输出第1列，第6列，第7列，以逗号分隔

cat /etc/passwd | awk -F “:” ‘/^root/{print $1",“$6”,"$7}’

[root@localhost jiaoben]# cat /etc/passwd | grep ^root | cut -d ":" -f 1,6,7
root:/root:/bin/bash
[root@localhost jiaoben]# cat /etc/passwd | awk -F ":" '/^root/{print $1,$7}'
root /bin/bash
[root@localhost jiaoben]# cat /etc/passwd | awk -F ":" '/^root/{print $1","$6","$7}'
root,/root,/bin/bash

3. 只显示/etc/passwd的第一列和第七列，以逗号分割，且在所有行前面加列明，user, shell,在最后一行添加“root, /bin/aaa”

cat /etc/passwd | awk -F “:” ‘BEGIN{print “user, shell”} {print $1","$7} END{print “root, /bin/aaa”}’

[root@localhost ~]# cat /etc/passwd | awk -F ":" 'BEGIN{print "user, shell"} {print $1","$7} END{print "root, /bin/aaa"}'
user, shell
root,/bin/bash
bin,/sbin/nologin
daemon,/sbin/nologin
adm,/sbin/nologin
lp,/sbin/nologin
sync,/bin/sync
shutdown,/sbin/shutdown
halt,/sbin/halt
mail,/sbin/nologin
operator,/sbin/nologin
games,/sbin/nologin
ftp,/sbin/nologin
nobody,/sbin/nologin
systemd-network,/sbin/nologin
dbus,/sbin/nologin
polkitd,/sbin/nologin
sshd,/sbin/nologin
postfix,/sbin/nologin
chrony,/sbin/nologin
rpc,/sbin/nologin
gluster,/sbin/nologin
libstoragemgmt,/sbin/nologin
qemu,/sbin/nologin
unbound,/sbin/nologin
tss,/sbin/nologin
usbmuxd,/sbin/nologin
saned,/sbin/nologin
colord,/sbin/nologin
abrt,/sbin/nologin
geoclue,/sbin/nologin
saslauth,/sbin/nologin
ntp,/sbin/nologin
setroubleshoot,/sbin/nologin
rpcuser,/sbin/nologin
nfsnobody,/sbin/nologin
rtkit,/sbin/nologin
pulse,/sbin/nologin
radvd,/sbin/nologin
sssd,/sbin/nologin
gdm,/sbin/nologin
gnome-initial-setup,/sbin/nologin
tcpdump,/sbin/nologin
avahi,/sbin/nologin
root, /bin/aaa

BEGIN 在所有数据读取行之前执行；END 在所有数据执行之后执行

4. 将文件cut.txt的第一列数据加2并输出

awk -v i=2 ‘{print $1+2}’ cut.txt
cut.txt

1 张三 男 28
2 李四 男 31
3 Lily 女 32
4 Lucy 女 29
5 Jack 男 27

[root@localhost jiaoben]# cat cut.txt
1 张三 男 28
2 李四 男 31
3 Lily 女 32
4 Lucy 女 29
5 Jack 男 27
[root@localhost jiaoben]# awk -v i=2 '{print $1+2}' cut.txt
3
4
5
6
7

5. 统计cut.txt每行的行号，每行的列数

awk ‘{print “filename:” FILENAME", linenum:" NR “,col:” NF}’ cut.txt

[root@localhost jiaoben]# cat cut.txt
1 张三 男 28
2 李四 男 31
3 Lily 女 32
4 Lucy 女 29
5 Jack 男 27
[root@localhost jiaoben]# awk '{print "filename:" FILENAME", linenum:" NR ",col:" NF}' cut.txt
filename:cut.txt, linenum:1,col:4
filename:cut.txt, linenum:2,col:4
filename:cut.txt, linenum:3,col:4
filename:cut.txt, linenum:4,col:4
filename:cut.txt, linenum:5,col:4

6. 查询ifconfig命令输出结果中空行所在在行号

ifconfig | awk ‘/^$/{print NR}’

[root@localhost jiaoben]# ifconfig
ens33: flags=4163<UP,BROADCAST,RUNNING,MULTICAST>  mtu 1500
        inet 192.168.111.15  netmask 255.255.255.0  broadcast 192.168.111.255
        inet6 fe80::709d:adbe:cb11:42ef  prefixlen 64  scopeid 0x20<link>
        ether 00:0c:29:89:a9:62  txqueuelen 1000  (Ethernet)
        RX packets 1432  bytes 123824 (120.9 KiB)
        RX errors 0  dropped 0  overruns 0  frame 0
        TX packets 941  bytes 106953 (104.4 KiB)
        TX errors 0  dropped 0 overruns 0  carrier 0  collisions 0

lo: flags=73<UP,LOOPBACK,RUNNING>  mtu 65536
        inet 127.0.0.1  netmask 255.0.0.0
        inet6 ::1  prefixlen 128  scopeid 0x10<host>
        loop  txqueuelen 1000  (Local Loopback)
        RX packets 0  bytes 0 (0.0 B)
        RX errors 0  dropped 0  overruns 0  frame 0
        TX packets 0  bytes 0 (0.0 B)
        TX errors 0  dropped 0 overruns 0  carrier 0  collisions 0

virbr0: flags=4099<UP,BROADCAST,MULTICAST>  mtu 1500
        inet 192.168.122.1  netmask 255.255.255.0  broadcast 192.168.122.255
        ether 52:54:00:56:3e:5e  txqueuelen 1000  (Ethernet)
        RX packets 0  bytes 0 (0.0 B)
        RX errors 0  dropped 0  overruns 0  frame 0
        TX packets 0  bytes 0 (0.0 B)
        TX errors 0  dropped 0 overruns 0  carrier 0  collisions 0

[root@localhost jiaoben]# ifconfig | awk '/^$/{print NR}'
9
18
26

7. 切割IP

ifconfig ens33 | awk ‘/netmask/ {print $2}’

[root@localhost jiaoben]# ifconfig ens33 | awk '/netmask/ {print $2}'
192.168.111.15

8. substr()函数对指定域截取字符串

cat cut.txt | awk ‘{print substr($2,2)}’
cat cut.txt | awk ‘{print substr($2,2,2)}’
cat cut.txt | awk ‘{print substr($2,2,1)}’

[root@localhost jiaoben]# cat cut.txt
1 张三 男 28
2 李四 男 31
3 Lily 女 32
4 Lucy 女 29
5 Jack 男 27
[root@localhost jiaoben]# cat cut.txt | awk '{print substr($2,2)}'
三
四
ily
ucy
ack
[root@localhost jiaoben]# cat cut.txt | awk '{print substr($2,2,2)}'
三
四
il
uc
ac
[root@localhost jiaoben]# cat cut.txt | awk '{print substr($2,2,1)}'
三
四
i
u
a

9. length确定字符串的长度

cat cut.txt | awk ‘{print length}’

[root@localhost jiaoben]# cat cut.txt
1 张三 男 28
2 李四 男 31
3 Lily 女 32
4 Lucy 女 29
5 Jack 男 27
[root@localhost jiaoben]# cat cut.txt | awk '{print length}'
9
9
11
11
11

10. 分别求cut.txt第4列年龄的总和，还有平均年龄

cat cut.txt | awk ‘BEGIN{total=0}{total+=$4}END{print total}’
cat cut.txt | awk ‘BEGIN{total=0}{total+=$4}END{print total/NR}’

[root@localhost jiaoben]# cat cut.txt
1 张三 男 28
2 李四 男 31
3 Lily 女 32
4 Lucy 女 29
5 Jack 男 27
[root@localhost jiaoben]# cat cut.txt | awk 'BEGIN{total=0}{total+=$4}END{print total}'
147
[root@localhost jiaoben]# cat cut.txt | awk 'BEGIN{total=0}{total+=$4}END{print total/NR}'
29.4
stormkai
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
awk
hotshortgg的博客
03-16 157
????awk命令格式内建变量示例按行输出文本：BEGIN模式按字输出文本通过管道符，双引号调用shell命令 awk 工作原理: sed命令常用于一整行的处理，而awk比较倾向于将一行分成多个“字段”然后再进行处理。awk信息的读入也是逐行读取的，执行结果可以通过print的功能将字段数据打印显示。在使用awk命令的过程中,可以使用逻辑操作符“&&”表示“与”、“||”表示“或”、“!”表示“非”；还可以进行简单的数学运算，如+、-、*、/、%、^分别表示加、减、乘、除、取余和乘方。 命令
利用awk获取特定字符串所在行的内容
热门推荐
fengjingge
02-17 1万+
获取特定字符串所在行的内容 awk是强大的文档处理工具，是一门经典语言，利用脚本来运行awk的时候，脚本开头需要输入：#!/bin/awk -f，它和命令行输入的不同点是，在脚本里面不用在输入命令awk，和需要待处理的文件名。 脚本（it.awk）： #!/bin/awk -f # get has the #123 #234 test $1=="#123" {A=NR}
AWK
携手凡生的博客
03-14 492
一、AWK之入门 1.AWK简介 AWK并非是一个简单的命令，他其实是一门编程语言，非常适合用来处理文本类数据。数据可以来自标准输入、外部文件，或者其他命令的输出。AWK同时支持正则表达式和用户自定函数。 2.AWK的语法格式 awk 'Pattern {Action}' filename -其中Pattern用来指定判断条件 -{}中包含的是awk的动作，也就是awk对记录的...
Linux学习笔记-------Linux三剑客awk的用法
noflag的博客
06-12 235
AWK文本处理工具 AWK是一个优良的文本处理工具，Linux及Unix环境中现有的功能最强大的数据处理引擎之一。这种编程及数据操作语言（其名称得自于它的创始人阿尔佛雷德·艾侯、彼得·温伯格和布莱恩·柯林汉姓氏的首个字母）的最大功能取决于一个人所拥有的知识。awk经过改进生成的新的版本nawk,gawk，现在默认linux系统下日常使用的是gawk，用命令可以查看正在应用的a...
linux之awk命令的用法
09-04
`awk`是Linux环境中强大的文本处理工具，尤其适用于处理结构化的数据文件。它通过分析文本文件中的每一行，根据指定的规则对数据进行操作。...学习和掌握`awk`命令对于Linux系统管理和数据分析工作非常有帮助。
linux awk 命令大全
01-24
Linux中的`awk`命令是一个强大的文本分析工具，它允许用户基于特定的模式匹配对文本文件进行处理。在本文中，我们将深入探讨`awk`的基本概念、语法和常见用途。 首先，`awk`有三个主要版本：`awk`、`nawk`和`gawk`...
linux匹配命令awk、grep、sed简介
最新发布
04-12
awk本身就是UNIX/Linux的一种编程语言，用于处理数据和生成报告。 awk逐行方式扫描文件（或输入），以查找匹配某个特定模式的文本行，并对这些文本行执行指定动作。 awk是三个创始人的首字母，代表三个作者：Alfred ...
详解Linux中的awk命令
09-14
【Linux中的awk命令详解】 awk是一个强大的文本分析工具，它在Linux环境中被广泛用于处理文本文件，特别是数据处理和报告生成。awk的工作方式是逐行读取文件，并根据指定的规则对每一行进行分析和操作。它有三个...
linux redhat 命令 awk 单引号和双引号的区别
02-10
linux操作系统 redhat 命令 awk 单引号和双引号的区别
awk命令
lucky_C的博客
03-27 429
awk是一个强大的文本分析工具，相对于grep的查找，sed的编辑，awk在其对数据分析并生成报告时，显得尤为强大。简单来说awk就是把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行各种分析处理。 awk有3个不同版本: awk、nawk和gawk，未作特别说明，一般指gawk，gawk 是 AWK 的 GNU 版本。 awk其名称得自于它的创始人 Alfred Aho 、Pe...
AWK基本命令
FRESHET的专栏
04-30 519
awk基本命令 1.awk '{print $1}' /etc/fstab 默认以空格为分割符的第一个字段打印出来，空格不算 2.awk '{print $1 "\t " $3}' /etc/fstab 打印两个字段， lu@lu-VirtualBox:~$ awk '{print $1 "\t " $3}' /etc/fstab # static # # 'blk...
awk命令操作
weixin_45415743的博客
08-16 716
awk入门 可以对列和行进行操作，含有数组、函数等 awk脚本结构 awk ’BEGIN{ print "start" } pattern { commands } END{ print "end"} fileanme 例如： $ awk 'BEGIN{ i=0} { i++ } END{ print i }' filename $ echo -e "line1\nline2" | awk 'BEGIN{ print "Start"} {print} END{ print "End"}' 使
awk命令详解
JustinMJC的博客
11-23 439
原文：http://blog.chinaunix.net/uid-25266990-id-100557.html 什么是awk?  你可能对UNIX比较熟悉，但你可能对awk很陌生，这一点也不奇怪，的确，与其优秀的功能相比，awk还远没达到它应有的知名度。awk是什 么？与其它大多数UNIX命令不同的是，从名字上看，我们不可能知道awk的功能：它既不是具有独立意义的英文单词，也不是几个相关
经常使用的linux命令awk,Linux常用命令——awk
weixin_35801556的博客
05-01 573
awk 报告生成器awk 名称来自于它的创始人 Alfred Aho 、Peter Weinberger 和 Brian Kernighan 姓氏的首个字母awk 是行处理器: 相比较屏幕处理的优点，在处理庞大文件时不会出现内存溢出或是处理缓慢的问题，通常用来格式化文本信息注意：1. awk 处理过程: 依次对每一行进行处理，然后输出2. awk 更适合格式化文本，对文本进行较复杂的格式处理3. ...
awk用法
ZERO
08-28 482
对于每个输入行，awk 都会执行每个脚本代码块一次。 BEGIN（处理文件前的 action，常包含 FS、OFS 等） 、END（处理文件后的 action）。 常用内部变量：     NR（当前行数）     NF（字段总数）     $0（当前整行）     $1（第一个记录）     FS（字段分隔符，默认为一个空格）     OFS（输出字段分隔符）     ORS
三剑客-AWK命令详解
Abandon_Halcyon的博客
12-07 736
实验名称：Awk命令（脚本编程） 实验目的：进行实验，熟悉使用awk命令 实验环境：CentOS7 （1台） 实验步骤： 1、Awk脚本基础结构： 一个awk脚本通常由：BEGIN语句块、能够使用模式匹配的通用语 句块、END语句块3部分组成，这三个部分是可选的。任意一个部 分都可以不出现在脚本中，脚本通常是被单引号或双引号中 [root@bogon~]# awk ‘BEGIN{ i=0 } { i++ } END{ print i }’ /etc/passwd 43 //使用awk命令统计行数 2、Aw
linux命令awk
03-16
awk是一种文本处理工具，可以用于对文本文件进行分析和处理。它可以根据指定的规则对文本进行分割、过滤、格式化等操作，并输出处理结果。awk命令通常用于处理大型文本文件，如日志文件、配置文件等。它是Linux系统中非常常用的命令之一。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值