shell常用命令——awk正则表达式

最新推荐文章于 2023-11-28 00:53:05 发布
最新推荐文章于 2023-11-28 00:53:05 发布
阅读量667 收藏
点赞数
分类专栏： 学习日志
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/a313434458/article/details/80863403
版权

一、简述

awk 处理机制 :awk 会逐行处理文本 , 支持在处理第一行之前做一些准备工作 , 以及在处理完最后一行做一些总结性质的工作
在命令格式上分别体现如下 :
BEGIN{}: 读入第一行文本之前执行 , 一般用来初始化操作
{}: 逐行处理,逐行读入文本执行相应的处理,是最常见的编辑指令快

END{}: 处理完最后一行文本之后执行 , 一般用来输出处理结果

二、awk基本用法

awk [-F|-f] 'BEGIN{}{command1; command2} END{}' file
[-F|-f]   大参数，-F指定分隔符，-f调用脚本
'  '          引用代码块
//           匹配代码块，可以是字符串或正则表达式
{}           命令代码块，包含一条或多条命令

；          多条命令使用分号分隔


awk -F ":" '{print $1}' passwd 以冒号为分隔符打印passwd的第一列

[root@desktop mnt]# awk -F ":" '{print $1}' passwd
root
bin
daemon
adm
lp
sync
shutdown
halt
mail
operator
games
ftp
nobody
dbus
polkitd
avahi
avahi-autoipd
rpc
rpcuser
nfsnobody
ovirtagent
postfix
sshd
chrony
student
usbmuxd
colord
abrt
libstoragemgmt
unbound
qemu
saslauth
ntp
rtkit
radvd
pulse
gdm
gnome-initial-setup
tcpdump
westos
test
user1
user2
user3
[root@desktop mnt]#

awk -F ":" 'BEGIN{print "name"}{print $1}' passwd  先打印name,然后以冒号为分隔符打印passwd的第一列

awk -F ":" 'BEGIN{print "name"}{print $1}' passwd
name
root
bin
daemon
adm
lp
sync
shutdown
halt
mail
operator
games
ftp
nobody
dbus
polkitd
avahi
avahi-autoipd
rpc
rpcuser
nfsnobody
ovirtagent
postfix
sshd
chrony
student
usbmuxd
colord
abrt
libstoragemgmt
unbound
qemu
saslauth
ntp
rtkit
radvd
pulse
gdm
gnome-initial-setup
tcpdump
westos
test
user1
user2
user3

awk -F ":" 'BEGIN{print "name"}{print $1}END{print "END"}' passwd  先打印name,然后以冒号为分隔符打印passwd的第一列，然后在尾行打印END

[root@desktop mnt]# awk -F ":" 'BEGIN{print "name"}{print $1}END{print "END"}' passwd
name
root
bin
daemon
adm
lp
sync
shutdown
halt
mail
operator
games
ftp
nobody
dbus
polkitd
avahi
avahi-autoipd
rpc
rpcuser
nfsnobody
ovirtagent
postfix
sshd
chrony
student
usbmuxd
colord
abrt
libstoragemgmt
unbound
qemu
saslauth
ntp
rtkit
radvd
pulse
gdm
gnome-initial-setup
tcpdump
westos
test
user1
user2
user3
END

awk -F ":" 'BEGIN{print "NAME"}{print NR}END{print "END"}' passwd  先打印NAME,然后打印passwd每行的行号，然后在尾行打印END

[root@desktop mnt]# awk -F ":" 'BEGIN{print "NAME"}{print NR}END{print "END"}' passwd
NAME
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
END

awk -F ":" 'BEGIN{print "NAME"}{print NR$1}END{print "END"}' passwd 先打印NAME,然后打印passwd每行的行号，以冒号为分隔符打印passwd的第一列，然后在尾行打印END

[root@desktop mnt]# awk -F ":" 'BEGIN{print "NAME"}{print NR$1}END{print "END"}' passwd
NAME
1root
2bin
3daemon
4adm
5lp
6sync
7shutdown
8halt
9mail
10operator
11games
12ftp
13nobody
14dbus
15polkitd
16avahi
17avahi-autoipd
18rpc
19rpcuser
20nfsnobody
21ovirtagent
22postfix
23sshd
24chrony
25student
26usbmuxd
27colord
28abrt
29libstoragemgmt
30unbound
31qemu
32saslauth
33ntp
34rtkit
35radvd
36pulse
37gdm
38gnome-initial-setup
39tcpdump
40westos
41test
42user1
43user2
44user3
END

awk 'BEGIN{print "NAME"}{print }END{print "END"}' passwd   先打印NAME,然后打印passwd每行，然后在尾行打印END

[root@desktop mnt]# awk 'BEGIN{print "NAME"}{print }END{print "END"}' passwd
NAME
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin
dbus:x:81:81:System message bus:/:/sbin/nologin
polkitd:x:999:998:User for polkitd:/:/sbin/nologin
avahi:x:70:70:Avahi mDNS/DNS-SD Stack:/var/run/avahi-daemon:/sbin/nologin
avahi-autoipd:x:170:170:Avahi IPv4LL Stack:/var/lib/avahi-autoipd:/sbin/nologin
rpc:x:32:32:Rpcbind Daemon:/var/lib/rpcbind:/sbin/nologin
rpcuser:x:29:29:RPC Service User:/var/lib/nfs:/sbin/nologin
nfsnobody:x:65534:65534:Anonymous NFS User:/var/lib/nfs:/sbin/nologin
ovirtagent:x:175:175:RHEV-M Guest Agent:/usr/share/ovirt-guest-agent:/sbin/nologin
postfix:x:89:89::/var/spool/postfix:/sbin/nologin
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
chrony:x:998:996::/var/lib/chrony:/sbin/nologin
student:x:1000:1000:Student User:/home/student:/bin/bash
usbmuxd:x:113:113:usbmuxd user:/:/sbin/nologin
colord:x:997:995:User for colord:/var/lib/colord:/sbin/nologin
abrt:x:173:173::/etc/abrt:/sbin/nologin
libstoragemgmt:x:996:994:daemon account for libstoragemgmt:/var/run/lsm:/sbin/nologin
unbound:x:995:993:Unbound DNS resolver:/etc/unbound:/sbin/nologin
qemu:x:107:107:qemu user:/:/sbin/nologin
saslauth:x:994:76:"Saslauthd user":/run/saslauthd:/sbin/nologin
ntp:x:38:38::/etc/ntp:/sbin/nologin
rtkit:x:172:172:RealtimeKit:/proc:/sbin/nologin
radvd:x:75:75:radvd user:/:/sbin/nologin
pulse:x:171:171:PulseAudio System Daemon:/var/run/pulse:/sbin/nologin
gdm:x:42:42::/var/lib/gdm:/sbin/nologin
gnome-initial-setup:x:993:991::/run/gnome-initial-setup/:/sbin/nologin
tcpdump:x:72:72::/:/sbin/nologin
westos:x:1001:1001::/home/westos:/bin/bash
test:x:1002:1002::/home/test:/bin/bash
user1:x:1003:1003::/home/user1:/bin/bash
user2:x:1004:1004::/home/user2:/bin/bash
user3:x:1005:1005::/home/user3:/bin/bash
END

awk 'BEGIN{print "NAME"}{print NR;print }END{print "END"}' passwd  先打印NAME,然后打印每行的行号，每行行号下面打印内容，然后在尾行打印END

[root@desktop mnt]# awk -F ":" 'BEGIN{print "NAME"}{print NR;print }END{print "END"}' passwd
NAME
1
root:x:0:0:root:/root:/bin/bash
2
bin:x:1:1:bin:/bin:/sbin/nologin
3
daemon:x:2:2:daemon:/sbin:/sbin/nologin
4
adm:x:3:4:adm:/var/adm:/sbin/nologin
5
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
6
sync:x:5:0:sync:/sbin:/bin/sync
7
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
8
halt:x:7:0:halt:/sbin:/sbin/halt
9
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
10
operator:x:11:0:operator:/root:/sbin/nologin
11
games:x:12:100:games:/usr/games:/sbin/nologin
12
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
13
nobody:x:99:99:Nobody:/:/sbin/nologin
14
dbus:x:81:81:System message bus:/:/sbin/nologin
15
polkitd:x:999:998:User for polkitd:/:/sbin/nologin
16
avahi:x:70:70:Avahi mDNS/DNS-SD Stack:/var/run/avahi-daemon:/sbin/nologin
17
avahi-autoipd:x:170:170:Avahi IPv4LL Stack:/var/lib/avahi-autoipd:/sbin/nologin
18
rpc:x:32:32:Rpcbind Daemon:/var/lib/rpcbind:/sbin/nologin
19
rpcuser:x:29:29:RPC Service User:/var/lib/nfs:/sbin/nologin
20
nfsnobody:x:65534:65534:Anonymous NFS User:/var/lib/nfs:/sbin/nologin
21
ovirtagent:x:175:175:RHEV-M Guest Agent:/usr/share/ovirt-guest-agent:/sbin/nologin
22
postfix:x:89:89::/var/spool/postfix:/sbin/nologin
23
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
24
chrony:x:998:996::/var/lib/chrony:/sbin/nologin
25
student:x:1000:1000:Student User:/home/student:/bin/bash
26
usbmuxd:x:113:113:usbmuxd user:/:/sbin/nologin
27
colord:x:997:995:User for colord:/var/lib/colord:/sbin/nologin
28
abrt:x:173:173::/etc/abrt:/sbin/nologin
29
libstoragemgmt:x:996:994:daemon account for libstoragemgmt:/var/run/lsm:/sbin/nologin
30
unbound:x:995:993:Unbound DNS resolver:/etc/unbound:/sbin/nologin
31
qemu:x:107:107:qemu user:/:/sbin/nologin
32
saslauth:x:994:76:"Saslauthd user":/run/saslauthd:/sbin/nologin
33
ntp:x:38:38::/etc/ntp:/sbin/nologin
34
rtkit:x:172:172:RealtimeKit:/proc:/sbin/nologin
35
radvd:x:75:75:radvd user:/:/sbin/nologin
36
pulse:x:171:171:PulseAudio System Daemon:/var/run/pulse:/sbin/nologin
37
gdm:x:42:42::/var/lib/gdm:/sbin/nologin
38
gnome-initial-setup:x:993:991::/run/gnome-initial-setup/:/sbin/nologin
39
tcpdump:x:72:72::/:/sbin/nologin
40
westos:x:1001:1001::/home/westos:/bin/bash
41
test:x:1002:1002::/home/test:/bin/bash
42
user1:x:1003:1003::/home/user1:/bin/bash
43
user2:x:1004:1004::/home/user2:/bin/bash
44
user3:x:1005:1005::/home/user3:/bin/bash
END

显示ip

[root@desktop mnt]# ifconfig eth0 | awk '/inet/{print}'
        inet 172.25.254.166  netmask 255.255.255.0  broadcast 172.25.254.255
        inet6 fe80::5054:ff:fe00:420a  prefixlen 64  scopeid 0x20<link>
[root@desktop mnt]# ifconfig eth0 | awk '/inet\>/{print}'
        inet 172.25.254.166  netmask 255.255.255.0  broadcast 172.25.254.255
[root@desktop mnt]#

PiaoBoYang
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
linux正则表达式awk详解
12-13
awk和sed一样是流式编辑器，它也是针对文档中的行来操作的，一行一行的去执行。awk比sed更加强大，它能做到sed能做到的，同样也能做到sed不能做到的。awk常用来分段； awk不用加任何参数就可以实现 + ? * .  | 这些特殊符号； 1、截取文档中的某个段 [root@yonglinux ~]# head -n2 passwd |awk -F: '{print $1}' root bin [root@yonglinux ~]# head -n2 passwd |awk -F: '{print $0}' root:x:0:0:root:/root:/bin/bash bin:x
【shell命令】awk命令详解
最新发布
m0_61456945的博客
03-21 579
awk命令详解
awk 中 正则表达式使用
热门推荐
大牛牛
11-07 3万+
wk的命令格式 首先需要明确awk的命令格式，这样才能知道正则表达式应该放在哪里。 三种格式分别是： # awk 'pattern' filename # awk '{action}' filename # awk 'pattern {action}' filename 正则表达式放在哪？ 根据上面的命令格式可知，正则表达式应该放在‘patten’这个位置。 awk如何处理正则表达式 ...
awk加正则表达式你必须要会的东西
王海翔的博客
04-13 2039
在 awk 中使用数学运算 在 awk 中，像其他编程语言一样，它也支持一些基本的数学运算操作
正则表达式三剑客之——awk命令
shengjie87的博客
07-29 1266
awk命令什么是awk工作原理语法格式内建变量配置实例 什么是awk awk本身是一种编程语言，主要用于unix/linux里对文本进行处理，也是一个工具。awk处理数据也是逐行扫描文件，从第一行到最后一行，寻找匹配特定模式的行，在这些行上进行你所要的操作，如果没有处理动作，它也会显示到标准输出（屏幕）如果没有指定模式，那么对所有的行进行处理。我们现在所用的awk其实是gawk [root@server ~]# which awk /usr/bin/awk [root@server ~]# ll /usr/
【Linux正则表达式之awk】
qq_47592482的博客
01-23 1040
自定义变量方法一:方法二: 在程序中直接定义# 方法一: 定义一个值为变量,在awk的BEGIN模式中打印 [ root@kvm01 ~ ] # awk -v myname="grj" 'BEGIN{print "我的名字是?",myname}' 我的名字是?
正则表达式 通配符 awk文本处理工具
X2683933654的博客
11-28 742
正则表达式（Regular Expression，在代码中常简写为regex、regexp或RE），又称规则表达式，是一种文本模式，包括普通字符（例如，a 到 z 之间的字母）和特殊字符（称为“元字符”），是计算机科学的一个概念。正则表达式使用单个字符串来描述、匹配一系列匹配某个句法规则的字符串，通常被用来检索、替换那些符合某个模式（规则）的文本。许多程序设计语言都支持利用正则表达式进行字符串操作。
实战Shell脚本—sed,awk使用
03-17
在学习和使用这两个工具时，理解正则表达式是非常重要的，因为它们是`sed`和`awk`进行模式匹配的基础。此外，熟悉基本的Shell语法，如重定向、管道和循环，也有助于更好地集成`sed`和`awk`到Shell脚本中。 总之，`...
LINUX与UNIX SHELL编程指南——1
07-23
这部分详细介绍UNIX和LINUX系统的常用命令，如grep、sed、awk、find、cut等，以及如何结合使用它们进行数据过滤、文本处理和文件操作。同时，还会讲解输入/输出重定向、管道和进程控制，使读者能够灵活地操纵数据流...
Linux中awk的使用方法详解
09-14
awk 具有自己的编程语言——AWK 程序设计语言，它是一种样式扫描和处理语言，适用于处理和分析文本数据。awk 的主要优势在于，它能一次性处理复杂的文本分析任务，而无需像 sed、grep、tr 和 cut 这类命令那样组合...
Linux shell编写C语言词法分析器
01-10
利用shell脚本实现词法分析器，可以借助shell内置的文本处理能力，如正则表达式、流编辑器sed、文本处理工具awk等，来识别和处理C语言源代码中的模式。 以下是项目中可能用到的关键技术： 1. **正则表达式**：在...
awk_linux_bash_awk_
09-30
模式可以是正则表达式，用于匹配行。动作则是一系列要执行的命令，如打印、计算等。 **awk的字段分割** `awk`默认使用空格或制表符作为字段分隔符。例如，有这样一行数据： ``` John Doe 30 software engineer ``` ...
awk 正则表达式
千里之行始于足下
10-28 2425
awk 正则表达式
shell正则表达式—— awk命令
Ora_G的博客
07-26 438
awk概述 awk是一个强大的文本分析工具，相对于grep的查找，sed的编辑，awk在其对数据分析并生成报告时，显得尤为强大。简单来说awk就是把文件逐行的读入，默认以空格为分隔符将每行切片，切开的部分再进行各种分析处理。 awk是行处理器,相比较屏幕处理的优点，在处理庞大文件时不会出现内存溢出或是处理缓慢的问题，通常用来格式化文本信息。 在使用 awk 命令的过程中,可以使用逻辑操作符“&&”表示“与”、“||” 表示“或”、“！”表示“非”；还可以进行简单的数学运算，如+、-、*、/、
Linux正则表达式 awk
Shun的博客
10-31 1034
awd兼具sed的所有功能，而且比sed更加强大。
【shell 编程大全】awk详解
weixin_42373116的博客
03-01 1418
今天我们会将awk单独分为一个章节，因为其实awk本身是可以作为一个体系的，所以单独拿出来一章 ，不过分。
shell脚本 之 awk详解（数据筛选）
逆鳞_Kevin的博客
01-03 5312
主要介绍linux基本命令-awk的使用详解
Linux下的硬盘信息查看
a313434458的博客
05-03 2万+
1.fdisk -l 查看硬盘/dev/hd0 -----------IDE设备老式硬盘,并口硬盘sda 串口硬盘  sata s  串口d硬盘 a第一块/dev/sro  /dev/cdrom 光驱/dev/mapper  虚拟设备blkid  识别系统可以用的设备blkid&lt;=cat/proc/partitions &lt;=fdisk -l  小于等于 df -h   查看设备大小以2...
在linux下使用rpm命令安装软件
a313434458的博客
04-29 6031
1.rpmrpm -ivh 无法解决文件的依赖性 [kiosk@foundation42 Desktop]$ rpm -ivh linuxqq-v1.0.2-beta1.i386.rpm error: Failed dependencies:         缺少依赖文件 libatk-1.0.so.0 is needed by linuxqq-v1.0.2-beta1.i386 libca...
awk正则表达式能和-f
07-27
引用\[2\]:在awk中，可以使用正则表达式来匹配和处理文本。正则表达式可以用于模式匹配、替换和提取文本等操作。可以在awk命令中直接使用正则表达式，也可以将正则表达式写入一个文件中，然后通过-f选项加载该文件。使用正则表达式时，可以使用一些特殊字符和元字符来表示不同的模式。例如，使用"."表示匹配任意字符，使用"*"表示匹配前一个字符的零个或多个实例，使用"\[\]"表示匹配括号内的任意一个字符等等。通过结合正则表达式和awk的其他功能，可以实现更加灵活和强大的文本处理操作。 问题:awk正则表达式能和-f选项一起使用吗？ 回答: 是的，awk正则表达式可以和-f选项一起使用。通过-f选项加载一个包含正则表达式的文件，可以在awk命令中使用该文件中定义的正则表达式进行模式匹配、替换和提取文本等操作。这样可以使awk命令更加灵活和可维护。例如，可以将一组复杂的正则表达式写入一个文件，然后通过-f选项加载该文件，使得awk命令更加清晰和易于理解。 #### 引用[.reference_title] - *1* [正则表达式之awk工具用法](https://blog.csdn.net/weixin_45409403/article/details/102545317)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insert_down28v1,239^v3^insert_chatgpt"}} ] [.reference_item] - *2* *3* [9.正则表达式--awk](https://blog.csdn.net/honey_wx/article/details/120297795)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insert_down28v1,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值