awk命令常用实例

本文编辑整理自： http://apps.hi.baidu.com/share/detail/6533091

1、简单

awk '/101/' file 

显示文件file中包含101的匹配行。

awk '/101/,/105/' file 

显示文件file中包含101或105的行。

awk '$1 == 5' file

显示文件file中第1个字段为5的行。

awk '$1 ==  " CT " ' file 

显示文件file中第1个字段为CT的行

awk '$1 * $2 >100 ' file

显示文件file中第1个字段和第二个字段的乘积大于100的行

awk '$2 >5 && $2<=15' file

显示文件file中第二个字段大于5但小于等于15的行

2、字段域

awk '{print  NR , NF , $1 , $ NF }' file 

显示文件file的当前记录号、域数和每一行的第一个和最后一个域。

awk '/101/ {print $1,$2 + 10}' file 

把文件file的中包含101的匹配行的第一个字段进行显示，并把第二个字段域加10也显示，它们之间用逗号进行分割。

awk '/101/ {print  $1 $2 }' file

把文件file的中包含101的匹配行的第一个字段进行显示，并把第二个字段域加10也显示，但它们之间没有任何分割符。

3、管道输入

df  |  awk '$4>1000000 ' 

通过管道符获得输入，显示第4个字段域大于1000000的行。

4、字段域分割符

awk  -F  "|" '{print $1}' file 

按照新的分隔符“|”进行操作。

awk 'BEGIN { FS="[: \t|]" }

{print $1,$2,$3}' file 

通过设置分隔符变量FS=" [ :  \t | ]"使得 冒号、 制表格及 |都将作为分割符。

Sep="|"

awk  -F  $Sep '{print $1}' file 

按照环境变量Sep的值做为分隔符。

awk  -F  '[  : \t | ]' '{print $1}' file 

按照正则表达式的值做为分隔符，这里代表空格、:、TAB、|同时做为分隔符。

5、载入awk脚本命令文件

awk -f awkfile file 

载入文件awkfile的awk脚本命令来进行操作。

cat awkfile

/101/{print "\047 Hello! \047"} 

遇到匹配行以后打印 ' Hello! '.\047代表单引号。

6、行首匹配

awk ' $1   ~   /101/  {print $1}' file 

显示文件中第一个域匹配101的行（记录）。

7、输出分割符

awk 'BEGIN {  OFS ="%"}{print $1,$2}' file 

通过设置输出分隔符（OFS="%"）修改输出格式。

8、条件表达式

awk 'BEGIN { max=100 ;print "max=" max} 

BEGIN 表示在处理任意行之前进行的操作。

{max=($1 >max ?$1:max); print $1,"Now max is "max}' file 

取得文件第一个域的最大值。这里居然是进行字符ASC码的比较。

表达式1?表达式2:表达式3 相当于：

if (表达式1)

表达式2

else

表达式3

在awk的action中也可以使用条件表达式

awk '{print ($1>4 ? "high "$1: "low "$1)}' file

9、数学操作

awk '$1 * $2 >100 {print $1}' file 

显示文件file中第1个字段和第二个字段的乘积大于100的行

10、改变字段域

awk '$1 == “Chi” {$3 = “China”; print}' file 

找到匹配行后先将第3个域替换后再显示该行（记录）。

awk '{$7 %= 3; print $7}' file 

将第7域被3除，并将余数赋给第7域再打印。

11、字段组合

awk '/tom/ {wage=$2+$3; print wage}' file 

找到匹配行后为变量wage赋值并打印该变量。

12、对匹配的记录计数

awk '/tom/ { count++ ;}

END {print "tom was found " count " times"}' file 

END表示在所有输入行处理完后进行处理。

13、函数调用

awk 'gsub( / \$ /, "");gsub( / , / ,""); cost+=$4;

END {print "The total is $"  cost >"filename"}' file 

gsub函数用空串替换 $和 逗号，再将结果输出到 filename中。

14、条件语句

awk '{ gsub ( / \$ / ,""); gsub ( / , / ,"");

if  ($4>1000&&$4<2000) c1+=$4;

else if  ($4>2000&&$4<3000) c2+=$4;

else if  ($4>3000&&$4<4000) c3+=$4;

else  c4+=$4; }

END {printf "c1=[ %d ];c2=[ %d ];c3=[ %d ];c4=[ %d ]\n",c1,c2,c3,c4}' file

通过if和else if完成条件语句

awk '{ gsub ( / \$ / ,""); gsub ( / , / ,"");

if  ($4>3000&&$4<4000)  exit ;

else  c4+=$4; }

END  {printf "c1=[ %d ];c2=[ %d ];c3=[ %d ];c4=[ %d ]\n",c1,c2,c3,c4}' file

通过 exit在某条件时退出，但是仍执行END操作。

awk '{gsub(/\$/,"");gsub(/,/,"");

if ($4>3000)  next ;

else c4+=$4; }

END {printf "c4=[%d]\n",c4}' file

通过next在某条件时跳过该行，对下一行执行操作。

15、对多个文件操作

awk '{ print  FILENAME ,$0 }'  file1 file2 file3 >fileall 

把file1、file2、file3的文件内容全部写到fileall中，并在每行以其该行源文件名作为开始

awk ' $1!=previous {  close (previous); previous=$1 }

{print substr($0,index($0," ") +1)>$1}' fileall 

把合并后的文件重新分拆为3个文件。并与原文件一致。

17、getline

awk 'BEGIN {" date "| getline  d; print d}' 

通过管道把date的执行结果送给getline，并赋给变量d，然后打印。

awk 'BEGIN {system("echo  \" Input your name: \" ");  getline  d;print "\nYour name is",d," \b !\n"}'

通过getline命令交互输入name，并显示出来。

awk 'BEGIN {FS=":"; while( getline < "/etc/passwd" >0) { if($1~"050[0-9]_") print $1}}'

打印/etc/passwd文件中用户名包含050x_的用户名。

注：实验失败

18、调用系统变量

在awk中调用系统变量必须用单引号，如果是双引号，则表示字符串

Flag=abcd

awk '{print '$Flag'}' 

结果为abcd。

注：实验失败

awk '{print "$Flag"}' 

结果为$Flag

19、循环

awk  '{ i=1;while(i<= NF ) {print  NF , $i ;i++}}' file 

通过while语句实现循环。

awk  '{ for(i=1;i<= NF ;i++) {print  NF , $i }}' file 

通过for语句实现循环。

type file| awk  -F "/" '

{ for(i=1;i<=NF;i++)

{ if(i==NF) {  printf  "%s",$i }

else { printf "%s/",$i } }}' 

显示file这个命令的全路径。

awk ' BEGIN {

for(j=1;j<=12;j++)

{ flag=0;

printf "\n%d月份\n",j;

for(i=1;i<=31;i++)

{

if (j==2&&i>28) flag=1;

if ((j==4||j==6||j==9||j==11)&&i>30) flag=1;

if (flag==0) { printf  "%02d%02d ",j,i}

}

}

}'

用for和if显示日期