Linux命令之awk：变量应用（二）

最新推荐文章于 2021-05-01 14:22:51 发布
最新推荐文章于 2021-05-01 14:22:51 发布
阅读量92 收藏
点赞数
文章标签： awk 操作系统 php
原文链接：https://my.oschina.net/u/3409834/blog/1548743
版权

2019独角兽企业重金招聘Python工程师标准>>> hot3.png

awk内置变量（预定义变量）

说明：[A][N][P][G]表示第一个支持变量的工具，[A]=awk、[N]=nawk、[P]=POSIXawk、[G]=gawk

  • $n 当前记录的第n个字段，比如n为1表示第一个字段，n为2表示第二个字段。
  • $0 这个变量包含执行过程中当前行的文本内容。
  • [A] FS ：字段分隔符（默认是任何空格）。
  • [A] NF ：表示字段数，在执行过程中对应于当前的字段数。
  • [A] NR ：表示记录数，在执行过程中对应于当前的行号。
  • [A] FILENAME ： 当前输入文件的名。
  • [A] OFMT ：数字的输出格式（默认值是%.6g）。
  • [A] OFS ：输出字段分隔符（默认值是一个空格）。
  • [A] ORS ：输出记录分隔符（默认值是一个换行符）。
  • [A] RS ：记录分隔符（默认是一个换行符）。
  • [N] ARGC ：命令行参数的数目。
  • [N] ARGV ：包含命令行参数的数组。
  • [N] ERRNO ：最后一个系统错误的描述。
  • [N] RSTART ：由match函数所匹配的字符串的第一个位置。
  • [N] RLENGTH ：由match函数所匹配的字符串的长度。
  • [N] SUBSEP 数组下标分隔符（默认值是34）。
  • [P] ENVIRON ：环境变量关联数组。
  • [P] FNR ：同NR，但相对于当前文件。
  • [G] ARGIND ：命令行中当前文件的位置（从0开始算）。
  • [G] CONVFMT ：数字转换格式（默认值为%.6g）。
  • [G] FIELDWIDTHS ：字段宽度列表（用空格键分隔）。
  • [G] IGNORECASE ：如果为真，则进行忽略大小写的匹配。

示例

NR纪录数
NF字段数
FILENAME文件名
ARGC命令行参数数量
[root@sxooky ~]# echo -e "line1 f2 f3\nline2 f4 f5\nline3 f6 f7" > a.txt
[root@sxooky ~]# echo -e "test1 f2 f3 a1\ntest2 f4 f5 a2\ntest3 f6 f7 a3 a4" > b.txt
[root@sxooky ~]# awk '{print "NR:"NR,"NF:"NF,"FILENAME:"FILENAME,"ARGC:"ARGC}' a.txt b.txt 
NR:1 NF:3 FILENAME:a.txt ARGC:3
NR:2 NF:3 FILENAME:a.txt ARGC:3
NR:3 NF:3 FILENAME:a.txt ARGC:3
NR:4 NF:4 FILENAME:b.txt ARGC:3
NR:5 NF:4 FILENAME:b.txt ARGC:3
NR:6 NF:5 FILENAME:b.txt ARGC:3
NR变量的应用（纪录数）

统计文件中的行数：

[root@sxooky ~]# cat a.txt
line1 f2 f3
line2 f4 f5
line3 f6 f7
[root@sxooky ~]# awk 'END{print "NR_total:"NR}' a.txt
NR_total:3

以上命令只使用了END语句块，在读入每一行的时，awk会将NR更新为对应的行号，当到达最后一行NR的值就是最后一行的行号，所以END语句块中的NR就是文件的行数。

每行中第一个字段的累加：

[root@sxooky ~]# seq 5 | awk 'BEGIN{ sum=0; print "求各字段累加总和：" } { print $1"+"; sum+=$1 } END{ print "等于"; print sum }'
求各字段累加总和：
1+
2+
3+
4+
5+
等于
15
ORS变量的应用

ORS输出记录分隔符,缺省则为换行(“\n”)  如上例

上例中将其内容连接到一行：

[root@sxooky ~]# seq 5 | awk 'BEGIN{ sum=0; print "求各字段累加总和：";ORS="" }NR==1{print $1;sum+=$1}NR>=2{print "+"$1;sum+=$1}END{ print "="; print sum "\n"}'
求各字段累加总和：
1+2+3+4+5=15
OFS变量的应用

OFS输出字段分隔符,默认为空（没有）。

[root@sxooky ~]# cat a.txt 
line1 f2 f3
line2 f4 f5
line3 f6 f7
[root@sxooky ~]# awk 'BEGIN{OFS=" - "}{print $1,$2,$3}' a.txt 
line1 - f2 - f3
line2 - f4 - f5
line3 - f6 - f7
[root@sxooky ~]# awk 'BEGIN{OFS="......"}{print $1,$2,$3}' a.txt 
line1......f2......f3
line2......f4......f5
line3......f6......f7
RS变量控制记录分隔符
[root@sxooky ~]# awk 'BEGIN{ORS=" - "}{print}END{ORS="\n";print "\n"}' a.txt
line1 f2 f3 - line2 f4 f5 - line3 f6 f7 - 

[root@sxooky ~]# awk 'BEGIN{ORS=" - "}{print}END{ORS="\n";print "\n"}' a.txt |awk 'BEGIN{RS=" - "}{print $1}'
line1
line2
line3
[root@sxooky ~]# tail -1 /etc/passwd
sxooky:x:3367:3367::/home/sxooky:/bin/bash
[root@sxooky ~]# tail -1 /etc/passwd |awk 'BEGIN{RS=":"}{print $1}'
sxooky
x
3367
3367

/home/sxooky
/bin/bash
[root@sxooky ~]# tail -1 /etc/passwd |awk 'BEGIN{RS="/"}{print $1}'
sxooky:x:3367:3367::
home
sxooky:
bin
bash
NF变量的应用（打印某个字段）
[root@sxooky ~]# cd /usr/local/apache2.4/htdocs/wordpress/
[root@sxooky wordpress]# pwd
/usr/local/apache2.4/htdocs/wordpress
[root@sxooky wordpress]# pwd |awk -F"/" '{print $0}'
/usr/local/apache2.4/htdocs/wordpress
#打印最后一个字段或倒数第二个字段
[root@sxooky wordpress]# pwd |awk -F"/" '{print $NF}'
wordpress
[root@sxooky wordpress]# pwd |awk -F"/" '{print $(NF-1)}'
htdocs

awk外部变量

一般变量

在awk中，设置有意义的域名是一种好习惯一般的变量名设置方式为 var = $n，这里var    为调用的域变量名， n为实际域号。

  • 找出uid>1000的用户
[root@sxooky ~]# tail -1 /etc/passwd
sxooky:x:3367:3367::/home/sxooky:/bin/bash
[root@sxooky ~]# awk -F: '{name=$1;id=$3;if(id>1000)print name "\t" id}' /etc/passwd
mysql	3366
sxooky	3367

统计当前文件下面所有文件的大小之和:

  • 统计除目录外的文件大小总和
[root@sxooky ~]# ls -al |awk 'BEGIN{total=0}{if(/^[^d]/){total+=$5;print $5"\t"$9}}END{print "total size:" total}'
	
36	a.txt
18	awk_var.txt
14522	.bash_history
18	.bash_logout
176	.bash_profile
176	.bashrc
48	b.txt
100	.cshrc
74454	logssh.txt
893	.mysql_history
64	.pydistutils.cfg
129	.tcshrc
8979	.viminfo
total size:99613
将外部变量值传递给awk
  • 借助-v选项，可以将外部值（并非来自stdin）传递给awk：
  • 另一种传递外部变量方法
  • 当输入来自于文件时使用
[root@sxooky ~]# VAR=12345
[root@sxooky ~]# echo |awk -v var=$VAR '{print var}'
12345
[root@sxooky ~]# var1="abc"
[root@sxooky ~]# var2="123"
[root@sxooky ~]# echo |awk '{print v1 "\t" v2}' v1=$var1 v2=$var2
abc	123
[root@sxooky ~]# vim awk_var.txt

以上方法中，变量之间用空格分隔作为awk的命令行参数跟随在BEGIN、{}和END语句块之后。

转载于:https://my.oschina.net/u/3409834/blog/1548743

weixin_34269583
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
linux命令学习(11)—— awk -F ':'，以冒号为分隔符
a1809032425的博客
04-07 10万+
linux命令学习(11)—— awk -F ':'，以冒号为分隔符参考网址：https://www.cnblogs.com/datalife/p/5887715.htmlawk是一个强大的文本分析工具，相对于grep的查找，sed的编辑，awk在其对数据分析并生成报告时，显得尤为强大。简单来说awk就是把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行各种分析处理。如果只是显示/e...
学习和理解AWK的最佳书籍Effective AWK Programming
07-25
学习和理解AWK的最佳书籍 　　一致这本书是学习awk的最好书籍，网上下不到的，国内也买不到。国家图书馆和北京大学图书馆都有。强烈建议所有想学awk的同志们阅读（会有很多awk语言之外的启迪） 偶然机会得到，不敢独享，故在此分享所得。 　　语言发明人写的，肯定不同寻常。因为他们对awk是最了解的，所以简明扼要却不乏深入。我们从中可以读到他们为什么发明awk,awk的长处和短处，awk的简单发展史等。这本书对awk的编程模型、基本语法有简单明了的介绍，在进行数据处理、文本处理、报表、试验算法方面的应用也有很多好的实例。 　　由于是88年的老书，其中对gawk最新版本对awk的扩展没有提及，但这并不妨碍其称为一本经典。可以配合Arnold Robbins的Effective AWK Programming， 3rd edition, 2001一起阅读以了解gawk的最新状态。 (来自: 老好人的点评)
linux 文件行数变量,Linux命令之awk：变量应用（二）
weixin_28267011的博客
05-01 428
awk内置变量(预定义变量)说明：[A][N][P][G]表示第一个支持变量的工具，[A]=awk、[N]=nawk、[P]=POSIXawk、[G]=gawk$n 当前记录的第n个字段，比如n为1表示第一个字段，n为2表示第二个字段。$0 这个变量包含执行过程中当前行的文本内容。[A] FS ：字段分隔符(默认是任何空格)。[A] NF ：表示字段数，在执行过程中对应于当前的字段数。[A] NR...
Effective awk Programming
12-05
For anyone who writes scripts in the awk family of languages, the third edition of Effective awk Programming provides an in-depth guide to processing text files with plenty of working sample code. Whether you are starting out with awk or are an experienced developer, this book will help you extend the reach of your awk scripts., This tutorial covers the entire spectrum of awk script development: From the basics of opening, searching, and transforming text files, to a comprehensive tutorial for regular expressions, to more advanced features like internetworking. The focus is on the practical side of creating and running awk scripts, and there's plenty of hands-on advice for installing and running today's awk (and gawk)., The book begins with the fundamentals of awk for opening and transforming text flat files. The coverage of regular expressions, from simple rules for matching text to more advanced options, is particularly solid. You learn how to add variables and expressions for more intelligent awk scripts, plus how to parse data into records and fields. You'll also find out how to redirect output from awk scripts to other programs, a useful technique that can cause awk to get a lot more done in real applications., Later, you learn several valuable sample awk scripts that mimic existing Unix utilities (like grep, id, and split), plus samples for counting words in documents and printing mailing labels, and even a stream editor. This grab bag of sample code lets you try out the techniques presented earlier in the book. Other sections look at support for networking in today's gawk; for example, how gawk can read and write to URLs on the network almost just as easily as local files. Full sample code will teach the beginner or expert how to get productive with networks and awk. Final appendices trace the evolution of the awk language and show you how to download and install gawk., Suitable for beginner and experienced awk developers, Effective awk Programming, Third Edi
linux pwd awk
qingchun1987_303的专栏
02-07 938
linux 所有命令 参考 ：  http://www.linuxso.com/command/ linux pwd:  print working directory  Linux awk命令详解 参考： http://blog.csdn.net/hongkun001/article/details/6433059 6. 记录和域 6.1. 记录 awk把每一个以换行符结
ifconfig eth0|awk -F "[ :]+" 'NR==2{print $4 "/" $NF}'中"[ :]+" 是什么意思？
tomhibolu
09-26 1870
今天在群里面有人问到：ifconfig eth0|awk -F "[ :]+" 'NR==2{print $4 "/" $NF}'，我执行了一下 结果为192.168.55.229/255.255.255.0 但是现在有一个问题：那么[ :]+到底是什么意思呢？经过百度和群组的讨论，我们最终达成一致： [ :]+这个是正则表达式，+表示一个或多个，这里就表示一个或多个空格或冒号 ps： ...
linux-awk-完全手册范本.doc
12-03
awk 的调用方式有三种：一是使用 awk 命令行，二是使用-f 选项调用 awk 程序，三是利用命令解释器调用 awk 程序。awk 程序设计语言可以完成 grep 和 sed 所能完成的全部工作，并且具有样式装入、流控制、数学运算符...
Linux AWK使用描述
03-02
AWK 是一种强大的行处理器，在 Linux 中广泛应用于文本处理。AWK 的主要优点是可以处理庞大文件而不出现内存溢出或处理缓慢的问题。 AWK处理过程： AWK 命令的基本形式为：awk [-F|-f|-v] ‘BEGIN{} //{command1; ...
awk入门到精通.pdf
08-24
这是awk最常被应用之处. 若能常常 如此处理问题, 读者可以以更高的角度来思考抽象的问题, 而不会被拘泥于细节的部份. 本手册为awk入门的学习指引, 其内容将先强调如何撰写awk程序,未列入进一步解题方式的应 用实例,...
Linux相关命令详解
03-17
这个资源摘要信息主要介绍了 Linux 相关命令的详解，包括文本处理工具 awk、sed、grep、sort、uniq、cut、paste、join 等的语法规则、常用选项和示例应用。 awk 命令是Pattern Scanning and Processing Language，...
The AWK Programming Language 中文版
12-15
The AWK Programming Language (AWK 程序设计语言) 中文翻译, LaTeX 排版。 译者：wuzhouhui
Effective AWK Programming:Awk 编程的经典著作
10-28
Effective AWK Programming:Awk 编程的经典著作
有效的AWK编程，第三版Effective AWK Programming, 3rd Edition
11-15
教您有关awk语言以及如何有效使用它的知识。 还介绍了awk的GNU实现gawk。
GAWK：Effective AWK Programming Edition 4.2
08-18
压缩包资源列表 1.GAWK：Effective AWK Programming_Edition 4.2.dvi 2.GAWK：Effective AWK Programming_Edition 4.2.html 3.GAWK：Effective AWK Programming_Edition 4.2.pdf 4.GAWK：Effective AWK Programming_Edition 4.2.txt
[awk] 用-F指定多分隔符，awk的for语句， BEGIN, END
wulong710的专栏
12-11 8126
[awk] 用-F指定多分隔符 echo $(pwd)  | awk  -F'[/.@]' '{pring $1,$2,$3,NF,NR}' 比如我的路径 $ pwd /cygdrive/d/work/android.dooyogame/dy_cike/dy_cike_xcf/assets/image 要把目录列出来 $ echo $(pwd)  | a
sed和awk的必备书籍
05-09
包括： 1. sed与awk+第三版（中文高清晰），内容非常全面详细，看了觉得很不错，学习sed和awk的必备书籍。 2. Effective awk Programming, 4th Edition 3. Sed与awk第二版(高清版).pdf
EffectiveAwkProgramming5th.pdf
08-24
This is Edition 5.0 of GAWK: Effective AWK Programming: A User’s Guide for GNU Awk, for the 5.0.0 (or later) version of the GNU implementation of AWK.
linux 中begin的作用,AWK中的BEGIN和END的应用技巧
最新发布
05-26
在 Linux 中，`begin`通常用于处理命令行参数或初始化工作。例如，我们可以使用`begin`来设置变量或打印欢迎信息。`begin`关键字一般用于awk、perl等脚本语言的命令中。 在 AWK 中，`BEGIN`和`END`是两个特殊的模式模式。`BEGIN`模式在读取输入文件之前执行一次，而`END`模式在读取完输入文件后执行一次。这两个模式通常被用于进行一些初始化或者收尾工作，比如打印文件头、文件尾等等。 以下是一个简单的 AWK 脚本，演示了`BEGIN`和`END`的应用： ``` #!/usr/bin/awk -f BEGIN { print "Welcome to my AWK script!" } { # 处理输入文件 print $0 } END { print "Thanks for using my AWK script!" } ``` 在这个脚本中，`BEGIN`模式打印欢迎信息，`END`模式打印结束信息。中间的代码块用于处理输入文件。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值