awk是行处理器: 相比较屏幕处理的优点,在处理庞大文件时不会出现内存溢出或是处理缓慢的问题,通常用来格式化文本信息
awk处理过程: 依次对每一行进行处理,然后输出
awk命令形式:
awk [option] 'program' file
其中program:pattern{action statements}
- pattern:决定动作语句何时触发以及触发事件
- action:对数据进行处理,放在{}里面指明,不指明动作时,默认为print $0.即打印所有的域
什么是域?
通过分隔符将字符串分割的字段用1,2,3…n标识,n称为标识域,0
为所有域。
forexample:
[option]:
**-F ###指定分隔符**
-V var=value ####自定义变量
命令中特殊要点:
-
’ ’ ##引用代码块
-
BEGIN 初始化代码块,在对每一行进行处理之前,初始化代码,主要是引用全局变量,设置FS分隔符
-
// 匹配代码块,可以是字符串或正则表达式
-
{} 命令代码块,包含一条或多条命令
相当于awk -F":" '{print $1 " " $3}' /etc/passwd
####$1与$3之间手动添加空格分隔` -
; 多条命令使用分号分隔,每行一个输出结果。
-
END 结尾代码块,在对每一行进行处理之后再执行的代码块,主要是进行最终计算或输出结尾摘要信息
-
$0 表示整个当前行
-
$1 每行第一个字段
-
NF 字段数量变量
-
NR 每行的记录号,多文件记录递增
-
FNR 与NR类似,不过多文件记录不递增,每个文件都从1开始
-
\t 制表符
-
\n 换行符
-
FS BEGIN时定义分隔符
-
RS 输入的记录分隔符, 默认为换行符(即文本是按一行一行输入)
-
~ 匹配,与==相比不是精确比较
-
!~ 不匹配,不精确比较
-
== 等于,必须全部相等,精确比较
-
!= 不等于,精确比较
-
&& 逻辑与
-
|| 逻辑或
-
/[0-9][0-9]+/ 两个或两个以上数字
-
/[0-9][0-9]*/ 一个或一个以上数字
-
FILENAME 文件名
-
OFS 输出字段分隔符, 默认也是空格,可以改为制表符等
-
ORS 输出的记录分隔符,默认为换行符,即处理结果也是一行一行输出到屏幕
-
-F’[:#/]’ 定义三个分隔符
实例:
awk -F: '{print NF}' /etc/passwd //显示每行有多少字段
awk -F: '{print $NF}' /etc/passwd //将每行第NF个字段的值打印出来
awk -F: 'NF==4 {print }' /etc/passwd //显示只有4个字段的行
awk -F: 'NF>2{print $0}' /etc/passwd //显示每行字段数量大于2的行
awk '{print NR,$0}' /etc/passwd //输出每行的行号
awk -F: '{print NR,NF,$NF,"\t",$0}' /etc/passwd //依次打印行号,字段数,最后字段值,制表符,每行内容
awk -F: 'NR==5{print}' /etc/passwd //显示第5行
awk -F: 'NR==5 || NR==6{print}' /etc/passwd //显示第5行和第6行
route -n|awk 'NR!=1{print}' //不显示第一行