使用awk提取文本 awk处理条件 awk流程控制 awk扩展应用

1 案例1：使用awk提取文本

1.1 问题

本案例要求使用awk工具完成下列过滤任务：

• 练习awk工具的基本用法
• 提取本机的网卡流量、根分区剩余容量、获取SSH远程失败的IP地址
• 格式化输出/etc/passwd文件中的用户名、UID、宿主目录信息

1.2 步骤

实现此案例需要按照如下步骤进行。

步骤一：awk文本过滤的基本用法

1）基本操作方法

格式：awk [选项] '[条件]{指令}' 文件

其中，print 是最常用的编辑指令；若有多条编辑指令，可用分号分隔。

Awk过滤数据时支持仅打印某一列，如第2列、第5列等。

处理文本时，若未指定分隔符，则默认将空格、制表符等作为分隔符。

直接过滤文件内容：

1. [root@svr5 ~]# cat test.txt
2. hello the world
3. welcome to beijing
4. [root@svr5 ~]# awk '{print $1,$3}' test.txt        //打印文档第1列和第3列
5. hello world
6. welcome beijing

结合管道过滤命令输出：

1. [root@svr5 ~]# df -h | awk '{print $4}'        //打印磁盘的剩余空间

2）选项 -F 可指定分隔符

输出passwd文件中以分号分隔的第1、7个字段，显示的不同字段之间以逗号隔开，操作如下：

1. [root@svr5 ~]# awk -F: '{print $1,$7}' /etc/passwd
2. root /bin/bash
3. bin /sbin/nologin
4. daemon /sbin/nologin
5. adm /sbin/nologin
6. lp /sbin/nologin
7. … …

awk还识别多种单个的字符，比如以“:”或“/”分隔，输出第1、10个字段：

1. [root@svr5 ~]# awk -F [:/] '{print $1,$10}' /etc/passwd
2. root bash
3. bin nologin
4. daemon nologin
5. adm sbin
6. … …

awk常用内置变量：

$0 文本当前行的全部内容

$1 文本的第1列

$2 文件的第2列

$3 文件的第3列，依此类推

NR 文件当前行的行号

NF 文件当前行的列数（有几列）

输出每次处理行的行号，以及当前行以“:”分隔的字段个数（有几列）：

1. [root@svr5 ~]# awk -F: '{print NR,NF}' passwd.txt
2. 1 7
3. 2 7
4. 3 7
5. .. ..

2）awk的print指令不仅可以打印变量，还可以打印常量

1. [root@svr5 ~]# awk -F: '{print $1,"的解释器:",$7}' /etc/passwd
2. root 的解释器: /bin/bash
3. bin 的解释器: /sbin/nologin
4. … …

步骤二：利用awk提取本机的网络流量、根分区剩余容量、获取远程失败的IP地址

1）提取IP地址

分步实现的思路及操作参考如下——

通过ifconfig eth0查看网卡信息，其中包括网卡流量：

1. [root@svr5 ~]# ifconfig eth0
2. eth0: flags=4163<UP,BROADCAST,RUNNING,MULTICAST> mtu 1500
3. inet 192.168.4.21 netmask 255.255.255.0 broadcast 192.168.4.255
4. inet6 fe80::fa64:c143:ad6a:5159 prefixlen 64 scopeid 0x20<link>
5. ether 52:54:00:b3:11:11 txqueuelen 1000 (Ethernet)
6. RX packets 313982 bytes 319665556 (304.8 MiB)
7. RX errors 0 dropped 0 overruns 0 frame 0
8. TX packets 51809 bytes 40788621 (38.8 MiB)
9. TX errors 0 dropped 0 overruns 0 carrier 0 collisions 0

RX为接收的数据量，TX为发送的数据量。packets以数据包的数量为单位，bytes以字节为单位：

1. [root@svr5 ~]# ifconfig eth0 | awk '/RX p/{print $5}' //过滤接收数据的流量
2. 319663094
3. [root@svr5