linux三剑客之awk详解

awk是行处理器: 相比较屏幕处理的优点，在处理庞大文件时不会出现内存溢出或是处理缓慢的问题，通常用来格式化文本信息

awk处理过程: 依次对每一行进行处理，然后输出

awk命令形式:

awk [option] 'program' file

其中program:pattern{action statements}

• pattern:决定动作语句何时触发以及触发事件
• action:对数据进行处理，放在{}里面指明，不指明动作时，默认为print $0.即打印所有的域
  

什么是域？
通过分隔符将字符串分割的字段用1，2，3…n标识，n称为标识域，0
为所有域。

forexample:

[option]:

**-F    ###指定分隔符**
-V var=value   ####自定义变量

命令中特殊要点：

• ’ ’ ##引用代码块
  

• BEGIN 初始化代码块，在对每一行进行处理之前，初始化代码，主要是引用全局变量，设置FS分隔符

• // 匹配代码块，可以是字符串或正则表达式

• {} 命令代码块，包含一条或多条命令
  
  
  相当于awk -F":" '{print $1 " " $3}' /etc/passwd ####$1与$3之间手动添加空格分隔`

• ； 多条命令使用分号分隔，每行一个输出结果。
  

• END 结尾代码块，在对每一行进行处理之后再执行的代码块，主要是进行最终计算或输出结尾摘要信息

• $0 表示整个当前行

• $1 每行第一个字段

• NF 字段数量变量

• NR 每行的记录号，多文件记录递增

• FNR 与NR类似，不过多文件记录不递增，每个文件都从1开始

• \t 制表符

• \n 换行符

• FS BEGIN时定义分隔符

• RS 输入的记录分隔符， 默认为换行符(即文本是按一行一行输入)

• ~ 匹配，与==相比不是精确比较

• !~ 不匹配，不精确比较

• == 等于，必须全部相等，精确比较

• != 不等于，精确比较

• &&　 逻辑与

• || 逻辑或

• /[0-9][0-9]+/ 两个或两个以上数字

• /[0-9][0-9]*/ 一个或一个以上数字

• FILENAME 文件名

• OFS 输出字段分隔符， 默认也是空格，可以改为制表符等
  

• ORS 输出的记录分隔符，默认为换行符,即处理结果也是一行一行输出到屏幕

• -F’[:#/]’ 定义三个分隔符

实例：

awk -F: '{print NF}' /etc/passwd                                //显示每行有多少字段
awk -F: '{print $NF}' /etc/passwd                              //将每行第NF个字段的值打印出来
 awk -F: 'NF==4 {print }' /etc/passwd                       //显示只有4个字段的行
awk -F: 'NF>2{print $0}' /etc/passwd                       //显示每行字段数量大于2的行
awk '{print NR,$0}' /etc/passwd                                 //输出每行的行号
awk -F: '{print NR,NF,$NF,"\t",$0}' /etc/passwd      //依次打印行号，字段数，最后字段值，制表符，每行内容
awk -F: 'NR==5{print}'  /etc/passwd                         //显示第5行
awk -F: 'NR==5 || NR==6{print}'  /etc/passwd       //显示第5行和第6行
route -n|awk 'NR!=1{print}'                                       //不显示第一行