shell：awk的工作流程即执行方式（带示例）

于 2022-09-06 09:24:21 发布 42 收藏
文章标签： 服务器 java linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_71999868/article/details/126717774
版权

awk的工作流程

首先，awk的基本语法为 awk ‘pattern{actions}’,其中pattern代表匹配模式，actions表示要执行的操作，pattern和actions都是可选的，但是两者必须至少有一个；
工作流程：（反复执行4个步骤）
1、自动从指定的数据文件中读取行文本
2、自动更新awk的内置系统变量的值，例如列数变量NF、行数变量NR、行变量$0以及各个列变量$1、$2等
3、依次执行程序中所有的匹配模式及其操作
4、当执行完程序中所有的匹配模式及其操作之后，如果数据文件中仍然还有未读取的数据行，则返回到第1步，重复执行1-4的操作。
 

awk程序的执行方式

1、通过命令执行方式awk程序

awk 'program-text' datafile

2、执行awk脚本

awk -f program-file file ...

program-file表示awk脚本文件名称，file代表要处理的数据文件
3、可执行脚本文件
需要再awk程序中指定命令解释器，并且赋予脚本可执行权限
指定命令解释器：#！/bin/awk -f
赋予可执行权限：chmod a+x file
最终可以通过以下命令执行：

awk-script file

#awk-script为awk脚本文件名称，file要处理的数据文件

awk打印一个内容和打印多个内容

     

  • 格式化输出：显示Hello World字符串且宽度为50，向左对齐
  • [root@servera example]# vim hello.txt
Hello World
# 左对齐
[root@servera example]# awk '{printf "%-50s",$0}' hello.txt 
Hello World                                       [root@servera example]#
# 默认右对齐
[root@servera example]# awk '{printf "%50s",$0}' hello.txt 
                                       Hello World[root@servera example]#

    awk中所有内置变量的使用，以及自定义变量并使用

    awk内置变量

  • [root@servera example]# cat hello.txt 
Hello World
hello cat
hello xiaoming
hello xiaohong
[root@servera example]#

    $n 字段变量，其中n为整数，且n大于1。表示第n个字段的值

  • [root@servera ~]# echo "1:2:3:4" | awk -F : '{print $3}'
3
[root@servera ~]# echo -e "1:2:3:4\n11:22:33:44" | awk -F : '{print $4}'
4
44

    NR 整数值，表示awk已经读入的记录数；如果有多个文件，这个数目会把处理的多个；文件中行统一计数。（显示的是文件的每一行的行号）

  • [root@servera example]# awk '{print NR}' hello.txt 
1
2
3
4

    NF 整数值，表示当前记录（变量$0所代表的记录）的字段数

  • [root@servera example]# awk '{print NF}' hello.txt 
2
2
2
2

    与NR不同的是，FNR用于记录正处理的行是当前这一文件中被总共处理的行数

  • [root@servera example]# awk '{print FNR}' hello.txt 
1
2
3
4

    $0 记录变量，表示当前正在处理的记录

  • [root@servera ~]# echo "1:2:3:4" | awk -F : '{print $0}'
1:2:3:4

    FS 输入字段分隔符，默认值是空格或者制表符，可使用-F指定分隔符

  • [root@servera bash]# echo "1:2:3" | awk 'BEGIN{FS=":"}{print $0,$1,$2}'
1:2:3 1 2

    OFS 输出字段分隔符 ，OFS=”#”指定输出分割符为#

  • [root@servera bash]# echo "1:2:3" | awk 'BEGIN{FS=":";OFS="-"}{print $0,$1,$2}'
1:2:3-1-2

    ENVIRON 当前shell环境变量及其值的关联数组

  • [root@servera bash]# echo "" | awk '{print ENVIRON["PATH"]}'
/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/root/bin

    awk自定义变量

  • [root@servera bash]# awk 'BEGIN{test="hello";print test}'
hello
[root@servera bash]# echo "" | awk 'BEGIN{test="hello";print test} test=="hello" {print test} END{print test}'
hello
hello
hello
[root@servera bash]# echo "" | awk -v test="hello" 'BEGIN{print test} test=="hello" {print test} END{print test}'
hello
hello
hello

    awk文本处理，数学计算

    awk执行数学计算: 10/2*3+5%2+2^3

  • [root@servera example]# awk 'BEGIN{print 10/2*3+5%2+2^3}'
24

    awk处理文本：要求文本有5行内容，且当行数为奇数的时候打印第一个字段

  • [root@servera example]# cat hello.txt 
one Hello World
two hello cat
three hello xiaoming
four hello xiaohong
five hello xiaozhang
[root@servera example]# awk  '{if (NR%2==1 && "END{print NR}==5") print $1}' hello.txt 
one
three
five

    awk中控制语句

    if: 给定一个成绩0-100，输出等级: A:85-100, B:70-84, C:60-69, D:0-59

  • [root@servera example]# cat score.txt 
120
30
56
75
95
81
[root@servera example]# cat awk_if.sh 
#!/bin/awk -f
{

if ($1 >= 85 && $1 <= 100){
    print $1,"A"
}
else 
{
    if ($1 >= 70 && $1<=84){
        print $1,"B"
    }
    else
    {
        if ($1 >= 60 && $1 <=69){
            print $1,"C"
        }
        else
        {
            if ($1 >=0 && $1 <= 59){
                print $1,"D"
            }
            else
            {
                print  $1  " Tips:value 0-100"
            }
        }
    }
}
}
[root@servera example]# chmod a+x awk_if.sh
[root@servera example]# ./awk_if.sh score.txt 
120 Tips:value 0-100
30 D
56 D
75 B
95 A
81 B

    for(): 计算1+2…+100的和

  • [root@servera example]# vim awk_for.sh
#!/bin/awk -f
BEGIN{
sum=0
for(i=1;i<=100;i++){
    sum+=i
}
print "1+2+....+100="sum
}
[root@servera example]# ./awk_for.sh 
1+2+....+100=5050

    简单数组

    for(in): 定义一个数组：数组中的元素为： array[name]=age,-> zhangsan:18 lisi:20 wangwu=21
    循环访问数组，并输出数组中的key和value

  • [root@servera example]# vim awk_array.sh
#!/bin/awk -f
BEGIN{
array["zhangsan"]=18
array["lisi"]=20
array["wangwu"]=21
for(var in array){
    print var,array[var]
  }
}                                                
[root@servera example]# ./awk_array.sh 
zhangsan 18
wangwu 21
lisi 20

    用while和do…while实现9*9乘法表

    awk的while实现

  • [root@servera example]# vim while_awk.sh
#!/bin/awk -f
BEGIN{
    j=1
    while (i<=9){
        while (j<=i){
            t=i*j
            printf("%d*%d=%d\t",i,j,t)
            j++
        }
        i++
        j=1
        printf("\n")
    }
}
[root@servera example]# chmod a+x while_awk.sh
[root@servera example]# ./while_awk.sh
1*1=1	
2*1=2	2*2=4	
3*1=3	3*2=6	3*3=9	
4*1=4	4*2=8	4*3=12	4*4=16	
5*1=5	5*2=10	5*3=15	5*4=20	5*5=25	
6*1=6	6*2=12	6*3=18	6*4=24	6*5=30	6*6=36	
7*1=7	7*2=14	7*3=21	7*4=28	7*5=35	7*6=42	7*7=49	
8*1=8	8*2=16	8*3=24	8*4=32	8*5=40	8*6=48	8*7=56	8*8=64	
9*1=9	9*2=18	9*3=27	9*4=36	9*5=45	9*6=54	9*7=63	9*8=72	9*9=81

    awk的do while实现

  • [root@servera example]# vim do_while_awk.sh
#!/bin/awk -f
BEGIN {  
i=1     
    do
    {        
        j=1 
        do
        {
            printf("%d*%d=%d\t",i,j,i*j)
            j++
        }while(j<=i)
      i++
      printf("\n") 
    }while (i<=9)
}
[root@servera example]# chmod a+x do_while_awk.sh
[root@servera example]# ./do_while_awk.sh 
1*1=1	
2*1=2	2*2=4	
3*1=3	3*2=6	3*3=9	
4*1=4	4*2=8	4*3=12	4*4=16	
5*1=5	5*2=10	5*3=15	5*4=20	5*5=25	
6*1=6	6*2=12	6*3=18	6*4=24	6*5=30	6*6=36	
7*1=7	7*2=14	7*3=21	7*4=28	7*5=35	7*6=42	7*7=49	
8*1=8	8*2=16	8*3=24	8*4=32	8*5=40	8*6=48	8*7=56	8*8=64	
9*1=9	9*2=18	9*3=27	9*4=36	9*5=45	9*6=54	9*7=63	9*8=72	9*9=81

    awk中内置函数的使用：substr, tolower, toupper, system

  • [root@servera example]# vim awk_built_in_function.sh
#!/bin/awk -f
BEGIN{
    print "------------------substr------------------"
    str="hello world!"
    new_str=substr(str,2,6)
    printf("%s\n",new_str)


    print "---------------------tolower,toupper--------------------"
    a="love is story"
    printf("a->A:%s\n",toupper(a))
    A="LOVE IS STORY"
    printf("A->a:%s\n",tolower(A))

    print "---------------------system-----------------------"
    print system("whoami")
}
[root@servera example]# chmod a+x awk_built_in_function.sh
[root@servera example]# ./awk_built_in_function.sh
------------------substr------------------
ello w
---------------------tolower,toupper--------------------
a->A:LOVE IS STORY
A->a:love is story
---------------------system-----------------------
root
0  #返回的状态码

大老师qaq
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
  • 打赏
    打赏
  • 0
    评论
awk小技巧之执行shell命令
wubaohu1314的博客
09-04 1709
方法一：system函数 1 ipadd|grepenp0s8|grepinet|awk'{print$2}'|awk-F"/"'{printf$1""}{cmd="hostname";system(cmd)} 1 [root@rac1~]#ls|awk'{printf$NF""}{cmd="hostname";system(cmd)} 方法二：使用变量（获取变量的时候已...
awk中使用的shell命令
良玉的博客
12-12 2291
awk中使用的shell命令，有2种方法： 一。使用所以system（） awk 'BEGIN {system("echo \"Input your name:\\c\""); getline d;print "\nYour name is",d,"\b!\n"}' 用（""）和\"   \"   \\转义。   system - execute a shell command （）
shell中的awk命令
01-07
shell中的awk命令 文章目录shell中的awk命令1.awk–“样式扫描和处理语言”2.awk模式匹配3.记录和域4.指定分隔符`-F “”` 指定分隔符`FS=””` 指定分隔符5.关系和布尔运算值6.表达式7.系统变量8.格式化输出9.内置字符串函数gsub函数indexlength 1.awk–“样式扫描和处理语言” awk是一种很棒的语言，它适合文本处理和报表生成，其语法较为常见，借鉴了某些语言的一些精华。在linux系统日常处理工作中，发挥很重要的工作。 awk程序由一个主输入循环维持，主输入循环反复执行，直到条件被触发，主输入循环无须由程序员去写，awk已经搭好主输入循环的
shell脚本之awk命令
花&败
05-02 2521
1. awk的用法 语法格式：awk [选项] ‘指令’ 操作文件 常用选项： -F： 指定分隔符，分隔符用""引起来 -v：var=value在awk程序开始之前指定一个值valu给变量var，这些变量值用于awk程序的BEGIN快 -f：后面跟一个保存了awk程序的文件，代替在命令行指定awk程序 2、实例1：在命令行直接输入awk指令 2.1、准备一个1.txt文件，内容如下 2.2、逐行读取文件1.txt内容并打印 命令：awk '{print}'1.txt...
linux awk命令详解
pianzhou2021的博客
03-13 438
简介 awk是一个强大的文本分析工具，相对于grep的查找，sed的编辑，awk在其对数据分析并生成报告时，显得尤为强大。简单来说awk就是把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行各种分析处理。 awk有3个不同版本: awk、nawk和gawk，未作特别说明，一般指gawk，gawk 是 AWK 的 GNU 版本。 awk其名称得自于它的创始人 Alfred Aho 、Peter Weinberger 和 Brian Kernighan 姓氏的首个字母。实际上 AWK 的确拥
awk命令详解【非常实用】
NBA_1的博客
04-28 4047
shell三剑客：grep、sed、awk cut -c：字符数来截取 character -f：字段来截取 field -d：指定分隔符 默认是tab awk命令详解 awk其实可以看做一种编程语言。 awk的来源：三个人名： Alfred Aho，Peter Weinberger，Brian Kernighan awk工作原理 gawk (gnu awk) Unix中awk的GNU版本，完成grep和sed的工作 。 支持数学运算，流程该控制内置大量的变量和函数。 awk命令工作原理 与sed一样, 均
awk语法-03-awk表达式（if语句、while循环、for循环）、awk中执行shell命令
运维玄德公
08-07 237
1. 条件表达式 2. if 语句 3. while循环 4. for 循环 5. 执行shell命令
awk命令
05-17 739
简介 awk是一种处理文本文件的语言，是一个强大的文本分析工具，grep、sed、awk并称为shell中文本处理的三剑客。 shell命令三剑客的比较 grep更适合单纯的查找或匹配文本 sed更适合编辑匹配到的文本 awk更适合格式化位版本，对文本进行复杂格式处理。 awk命令与sed一样，均是一行一行的读取、处理。区别在于sed作用与一整行的处理，而awk将一行分成数个字段来处理 awk命令详解 Usage: awk [POSIX or GNU style options] -f progfile
awk system执行完整命令行
qq_43573800的博客
10-18 233
使用awk 拼接了执行语句 print后 本来想用xargs直接执行如： [hdadmin@lv55qhpub01kf chenf]<20211018 10:13:45>$ cat test.txt |awk '{print "touch "$1}' touch 1 touch 3 touch 5 touch 6 [hdadmin@lv55qhpub01kf chenf]<20211018 10:14:09>$ cat test.txt |awk '{print "touch "$
awk、print使用
飞的博客
08-02 1528
代码】awk、print使用。
awk中自定义函数
Melgards的博客
09-20 100
通常函数的定义放在一个文件里。在awk主体程序中调用函数。函数的定义可以出现在任何位置。但是通常放在模式、动作之前。
linux三剑客略解
a501868354的博客
04-03 59
grep 过滤来自一个文件或标准输入匹配模式内容。 除了 grep 外，还有 egrep、fgrep。egrep 是 grep 的扩展，相当于 g，f，用的少。 -B，–before-context=NUM 打印匹配的前几行 -A，–after-context=NUM 打印匹配的后几行 -C，–context=NUM 打印匹配的前后几行 –color[=WHEN], 匹配的字体颜色 sed s...
【Linux篇】awk命令详解
weixin_45842494的博客
05-14 5971
文章目录awk 命令1. 基本用法2. 工作流程3. 常用选项参数说明4. 实操案例5. 常用awk的内置变量6. awk程序的优先级 awk 命令 一个强大的文本分析工具，把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行分析处理。 1. 基本用法 awk [选项参数] 'pattern1{action1} pattern2{action2}...' filename pattern：表示AWK在数据中查找的内容，就是匹配模式。action：在找到匹配内容时所执行的一系列命令。 注
awk 程序中使用 Shell 命令
bluewhale的专栏
05-05 840
awk程序中允许呼叫Shell指令. 并提供管道解决awk与系统间数据传递的问题. 所以awk很容易使用系统资源.主要有两种方式： a. 语法] awk output 指令 | "Shell 接受的命令"( 如 : print $1,$2 | "sort -k 1" ) [b. 语法] "Shell 接受的命令" | awk input 指令( 如 : "ls " | getline) 注
awk最全详解及实例操作
qq_32330469的博客
07-12 550
awk最全详解及实例操作
awk脚本用法
最新发布
qq_33172851的博客
11-27 230
awk脚本用法---传参----同时处理多个文件---awk使用数组
awk--工作流程
weixin_34166847的博客
12-15 156
2019独角兽企业重金招聘Python工程师标准>>> ...
AWK中使用函数
imzoer的专栏
03-30 2713
awk中有很多内置函数。可以分为两组。一个是算数函数，另外个是字符串函数。当然，awk也支持用户自己定义的函数来扩展内置函数。 算数函数： cos(x) sin(x) exp(x) int(x)：得到x的整数部分的值。 log(x)：返回x的自然对数。以e为底。 sqrt(x)： rand()：产生一个0 srand(x)：建立rand()的新的种子数，如果没有指定种子数，就用当
linux脚本awk,在awk中运行shell命令
weixin_36247910的博客
04-30 755
目前我所了解的在awk中运行shell命令 有2中方式实现1.awk内置函数system2.通过awk print出要执行的命令 然后交给/bin/bash 执行awk 内置函数system执行方法 awk ‘BEGIN{system(“shell命令)}’ 就行[root@CHSHA-CT-WWW-249 ~]# awk ‘BEGIN{system(“hostname”)}’CHSHA-CT...
使用awk 调用shell
叱咤少帅的博客
01-15 1908
一：awk程序中我们可以使用system() 函数去调用shell命令； （1）如果system（）括号里面的参数没有加上双引号的话，awk认为它是一个变量，它会从awk的变量里面把它们先置换为常量，然后再回传给shell； （2）如果system（）括号里面的参数有加上双引号的话，那么awk就直接把引号里面的内容回传给shell，作为shell的“命令行”。 二 示例如下: [ww...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
©️2022 CSDN 皮肤主题：1024 设计师：我叫白小胖 返回首页
评论

打赏作者

大老师qaq

你的鼓励将是我创作的最大动力

¥2 ¥4 ¥6 ¥10 ¥20
输入1-500的整数
余额支付 (余额：-- )
扫码支付
扫码支付：¥2
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、C币套餐、付费专栏及课程。

余额充值