linux awk命令NR详解,awk命令之NR和FNR变量用法详解

最新推荐文章于 2024-08-17 20:07:25 发布
最新推荐文章于 2024-08-17 20:07:25 发布
阅读量1.6w 收藏 26
点赞数 8
文章标签： linux awk命令NR详解

0、说明

刚好用到awk的NR和FNR这两个内建变量。经过一些测试大概熟悉其用法，这里记录下(本文只是用NR和FNR变量来判断当前读入的是第一个还是第二个文件，好对每个文件分别运行指定的脚本。需要注意的是只有读入的文件数小于或等于2个的时候才能使用NR和FNR来判断当前读入的是第几个文件，超过2个文件将无法判断)

1、NR和FNR的作用演示

NR和FNR都可以为awk读入的文件每行数据增加显示行号。不同之处在于当AWK读入多个文件的时候：NR的行号会一直增加下去，而FNR会在每读入一个新文件时将行号重新由1开始计算

1.1、首先创建两个示例文件

[root@imzcy ~]# cat user.txt #逗号分隔的三列分别表示：工号、姓名、部门编号

A0024,张三,10

A0019,李四,30

A0015,王五,40

A0021,孙六,80

[root@imzcy ~]#

[root@imzcy ~]# cat group.txt #逗号分隔的三列分别表示：部门编号、部门名称、部门位置

10,IT部,六层B区

20,财务部,七层C区

30,设计部,七层B区

40,人事部,六层C区

50,采购部,七层A区

60,招聘部,六层A区

70,法务部,七层D区

80,发展部,六层D区

90,总经办,六层E区

[root@imzcy ~]#

1.2、在AWK中调用NR变量，查看其作用

1.2.1、可以看到NR可以为读入的文件添加行号(行号从1开始，NR显示行号、$0显示行所有内容)

[root@imzcy ~]# awk '{print NR,$0}' user.txt

1 A0024,张三,10

2 A0019,李四,30

3 A0015,王五,50

4 A0021,孙六,80

[root@imzcy ~]#

1.2.2、根据下面输出可以看到，当NR读入多个文件的时候，行号会从上一个文件结束值增加的

[root@imzcy ~]# awk '{print NR,$0}' user.txt group.txt

1 A0024,张三,10

2 A0019,李四,30

3 A0015,王五,50

4 A0021,孙六,80

5 10,IT部,六层B区

6 20,财务部,七层C区

7 30,设计部,七层B区

8 40,人事部,六层C区

9 50,采购部,七层A区

10 60,招聘部,六层A区

11 70,法务部,七层D区

12 80,发展部,六层D区

13 90,总经办,六层E区

[root@imzcy ~]#

#1.3、在AWK中调用FNR变量，查看其作用

1.3.1、可以看到FNR同样也可以为读入的文件添加行号(行号从1开始，NR显示行号、$0显示行所有内容)

[root@imzcy ~]# awk '{print FNR,$0}' user.txt

1 A0024,张三,10

2 A0019,李四,30

3 A0015,王五,50

4 A0021,孙六,80

[root@imzcy ~]#

1.3.2、根据下面输出可以看到，当NR读入多个文件的时候，行号会从下一个文件开始时从新计算值增加的

[root@imzcy ~]# awk '{print FNR,$0}' user.txt group.txt

1 A0024,张三,10

2 A0019,李四,30

3 A0015,王五,50

4 A0021,孙六,80

1 10,IT部,六层B区

2 20,财务部,七层C区

3 30,设计部,七层B区

4 40,人事部,六层C区

5 50,采购部,七层A区

6 60,招聘部,六层A区

7 70,法务部,七层D区

8 80,发展部,六层D区

9 90,总经办,六层E区

[root@imzcy ~]#

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

28

29

30

31

32

33

34

35

36

37

38

39

40

41

42

43

44

45

46

47

48

49

50

51

52

53

54

55

56

57

58

59

60

61

62

63

64

65

66

67

68

69

70

71

1.1、首先创建两个示例文件

[root@imzcy~]# cat user.txt     #逗号分隔的三列分别表示：工号、姓名、部门编号

A0024,张三,10

A0019,李四,30

A0015,王五,40

A0021,孙六,80

[root@imzcy~]#

[root@imzcy~]# cat group.txt    #逗号分隔的三列分别表示：部门编号、部门名称、部门位置

10,IT部,六层B区

20,财务部,七层C区

30,设计部,七层B区

40,人事部,六层C区

50,采购部,七层A区

60,招聘部,六层A区

70,法务部,七层D区

80,发展部,六层D区

90,总经办,六层E区

[root@imzcy~]#

1.2、在AWK中调用NR变量，查看其作用

1.2.1、可以看到NR可以为读入的文件添加行号(行号从1开始，NR显示行号、$0显示行所有内容)

[root@imzcy~]# awk '{print NR,$0}' user.txt

1A0024,张三,10

2A0019,李四,30

3A0015,王五,50

4A0021,孙六,80

[root@imzcy~]#

1.2.2、根据下面输出可以看到，当NR读入多个文件的时候，行号会从上一个文件结束值增加的

[root@imzcy~]# awk '{print NR,$0}' user.txt group.txt

1A0024,张三,10

2A0019,李四,30

3A0015,王五,50

4A0021,孙六,80

510,IT部,六层B区

620,财务部,七层C区

730,设计部,七层B区

840,人事部,六层C区

950,采购部,七层A区

1060,招聘部,六层A区

1170,法务部,七层D区

1280,发展部,六层D区

1390,总经办,六层E区

[root@imzcy~]#

#1.3、在AWK中调用FNR变量，查看其作用

1.3.1、可以看到FNR同样也可以为读入的文件添加行号(行号从1开始，NR显示行号、$0显示行所有内容)

[root@imzcy~]# awk '{print FNR,$0}' user.txt

1A0024,张三,10

2A0019,李四,30

3A0015,王五,50

4A0021,孙六,80

[root@imzcy~]#

1.3.2、根据下面输出可以看到，当NR读入多个文件的时候，行号会从下一个文件开始时从新计算值增加的

[root@imzcy~]# awk '{print FNR,$0}' user.txt group.txt

1A0024,张三,10

2A0019,李四,30

3A0015,王五,50

4A0021,孙六,80

110,IT部,六层B区

220,财务部,七层C区

330,设计部,七层B区

440,人事部,六层C区

550,采购部,七层A区

660,招聘部,六层A区

770,法务部,七层D区

880,发展部,六层D区

990,总经办,六层E区

[root@imzcy~]#

2、接下来拿一个工作中用到的一段命令做示例讲解下(做了修改)

比如根据上面user.txt和group.txt两个文件，我现在要直接显示出来user.txt文件里那几个员工的：姓名、员工编号、部门名称。则可以用下面命令

2.1、根据user.txt和group.txt文件信息，直接输出：员工姓名,员工编号,部门名称

[root@imzcy ~]# awk -F , 'NR==FNR{Z[$3]=$2","$1}NR>FNR{print Z[$1]","$2}' user.txt group.txt

张三,A0024,IT部

,财务部

李四,A0019,设计部

,人事部

王五,A0015,采购部

,招聘部

,法务部

孙六,A0021,发展部

,总经办

[root@imzcy ~]#

因为group.txt里面有的部门在user.txt那个文件中没有，并且我直接打印了$2，所以也都会显示出来

2.2、加if语句做判断，只有当数组Z[$1]对应的值不为空的时候，才会打印出$2的值。

[root@imzcy ~]# awk -F , 'NR==FNR{Z[$3]=$2","$1}NR>FNR{if(Z[$1]!=""){print Z[$1]","$2}}' user.txt group.txt

张三,A0024,IT部

李四,A0019,设计部

王五,A0015,采购部

孙六,A0021,发展部

[root@imzcy ~]#

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

2.1、根据user.txt和group.txt文件信息，直接输出：员工姓名,员工编号,部门名称

[root@imzcy~]# awk -F , 'NR==FNR{Z[$3]=$2","$1}NR>FNR{print Z[$1]","$2}' user.txt group.txt

张三,A0024,IT部

,财务部

李四,A0019,设计部

,人事部

王五,A0015,采购部

,招聘部

,法务部

孙六,A0021,发展部

,总经办

[root@imzcy~]#

因为group.txt里面有的部门在user.txt那个文件中没有，并且我直接打印了$2，所以也都会显示出来

2.2、加if语句做判断，只有当数组Z[$1]对应的值不为空的时候，才会打印出$2的值。

[root@imzcy~]# awk -F , 'NR==FNR{Z[$3]=$2","$1}NR>FNR{if(Z[$1]!=""){print Z[$1]","$2}}' user.txt group.txt

张三,A0024,IT部

李四,A0019,设计部

王五,A0015,采购部

孙六,A0021,发展部

[root@imzcy~]#

3、语句运行过程详细说明

就拿下面这个awk脚本做说明

[root@imzcy ~]# awk -F , 'NR==FNR{Z[$3]=$2","$1}NR>FNR{print Z[$1]","$2}' user.txt group.txt

1

[root@imzcy~]# awk -F , 'NR==FNR{Z[$3]=$2","$1}NR>FNR{print Z[$1]","$2}' user.txt group.txt

3.1、总体运行过程如下：

1、首先根据你给定顺序读入第一个文件user.txt，然后将使用'NR==FNR{Z[$3]=$2","$1}NR>FNR{print Z[$1]","$2}' 对user.txt及后面其他文件每行内容做处理。

2、例如当读入第一行数据A0024,张三,10后，首先判断NR==FNR是否为真(因为现在读入的是第一个文件，此时NR和FNR的行号是相等的，所以为真)，为真则运行其后面的那段脚本{Z[$3]=$2","$1} ；上面那段脚本运行完后，因为后面还有脚本所以会继续向后运行，此时判断NR>FNR是否为真(因为现在读入的是第一个文件，此时NR和FNR的行号是相等的，所以并不会大于，此处为假)，为假时跳过执行其后面的脚本{print Z[$1]","$2}开始处理下一行数据。

3、当第一个文件的所有条目都处理完毕之后，开始读入第二个文件数据。

4、例如当前读入第一行数据10,IT部,六层B区 ，首先判断NR==FNR是否为真(因为现在读入的是第二个文件了，此时NR值增加，FNR则从1开始，所以并不相等，此时为假)，为假时跳过执行其后面脚本{Z[$3]=$2","$1} ； 继续向下运行，开始判断NR>FNR是否为真(因为读入的第二个文件，NR值增加，FNR值从1开始重新计算，所以NR大于FNR，此时为真)，为真则执行后面脚本{print Z[$1]","$2} 然后开始处理下一行数据

5、当每个文件都处理完则结束。

3.2、user.txt文件每行数据执行{Z[$3]=$2","$1} 脚本时过程：

1、执行脚本为Z[$3]=$2","$1 就是定义了一个数组Z，其下标名为$3的值为$2(做变量替换)。

2、例如此时读入第一行数据：A0024,张三,10 相当于定义了数组Z[10]=张三,A0024 (定义数组Z下标为10的值等于字符串张三,A0024)

3、读入user.txt第二行数据A0019,李四,30 相当于定义Z[30]=李四,A0019 (数组Z下标为30的值等于字符串李四,A0019)

4、后面都一样。

3.3、group.txt文件每行数据执行{print Z[$1]","$2}' 脚本时过程：

1、执行脚本print Z[$1]","$2 就是直接输出数组指定下标及变量对应的值。

2、例如此时读入第一行数据：10,IT部,六层B区 ，相当于print打印 Z[10]","IT部 ，也就是张三,A0024,IT部 (因为前面处理第一个文件数据时已经定好了数组Z，下标为10的值是张三,A0024，然后此处读入的group.txt文件的第一行数据$1的值是10，直接替换引用了)，然后继续向下处理下一行数据。

3、读入group.txt第二行数据20,财务部,七层C区 ，相当于打印Z[20]","财务部 ，但是因为前面处理第一个文件user.txt时，其中并没有属于财务部的员工，所以部门编号为20的对应数组下标并没有被定义值，所以这里Z[20]的值就为空，所以最终会打印机出来,财务部

4、后面就都一样了

weixin_39607935
关注
Linux 之 awk命令详解
Aaadsda414114的博客
07-19 557
我们可以在awk脚本中定义自己的函数。之后我们掌握其各种功能可以大大提高我们处理结构化文本数据的效率。
linux NR==变量,LINUX中详解AWK内建变量FS,NF,NR,RT,RS,ORS,OFS
weixin_33344629的博客
05-12 1400
看了网上好多关于AWK内建变量的文章，这里加上个人的理解和记忆，可以让大家掌握这些变量的基本用法。FS 指定字段un列分隔符(Font Space)[~/AWK_learning]$ echo "111|222|333" | awk '{print $1}' 111|222|333 [~/AWK_learning]$ echo "111|222|333" | awk 'BEGIN{FS="|"...
awk 使用经验笔记
最新发布
qq_45831414的博客
08-17 667
awk是一个用于文本处理的强大工具，它可以在 Unix/Linux 系统中找到广泛的应用。awk脚本可以用来执行各种文本处理任务，如查找模式、替换文本、计算数值、格式化输出等。awk是一个非常灵活和强大的文本处理工具。通过上述技巧和最佳实践，你可以更有效地使用awk来处理各种文本数据。无论是在日常开发还是系统管理工作中，awk都是不可或缺的好帮手。
AWK的NR和FNR详解
hybaym的专栏
07-02 2073
书上说: NR,表示awk开始执行程序后所读取的数据行数. FNR,与NR功用类似,不同的是awk每打开一个新文件,FNR便从0重新累计. 下面看两个例子: 1,对于单个文件NR 和FNR 的 输出结果一样的 ： # awk '{print NR,$0}' file1  1 a b c d 2 a b d c 3 a c b d #awk '{print
awk NR与FNR
兼容并蓄终宽阔，若谷虚怀鱼自游
11-16 776
 http://hi.baidu.com/drvial/blog/item/cf2bb2381322e92996ddd8cf.html书上说:NR,表示awk开始执行程序后所读取的数据行数.FNR,与NR功用类似,不同的是awk每打开一个新文件,FNR便从0重新累计.下面看两个例子: 1,对于单个文件NR 和FNR 的 输出结果一样的 ：# awk {
【转】awk内建变量示例详解之NR、FNR、NF
huiminchen的专栏
06-13 728
转自：http://www.letuknowit.com/topics/20120329/sample-about-awk-build-in-variable-nr-fnr-nf.html   　NR表示从awk开始执行后，按照记录分隔符读取的数据次数，默认的记录分隔符为换行符，因此默认的就是读取的数据行数，NR可以理解为Number of Record的缩写。 　　在awk处理多个输...
awk之NR & FNR
lin_FS的专栏
12-14 1161
NR,表示awk开始执行程序后所读取的数据行数. FNR,与NR功用类似,不同的是awk每打开一个新文件,FNR便从0重新累计.   在看一个例子关于NR和FNR的典型应用: #cat a 张三|000001 李四|000002 #cat b 000001|10 000001|20 000002|30 000002|15   想要得到的结果是将用户名，帐号
linux awk命令详解.docx
01-03
Linux中的`awk`命令是一个强大的文本分析工具，用于处理和解析结构化的文本文件。它能够按照用户指定的模式对文本进行分析，并根据需要提取、修改或格式化数据。`awk`命令的名字来源于它的三位创始人——Aho、Wall和...
awk中NR和FNR的区别小结和实例演示
09-15
在学习awk这一强大的文本处理工具时，了解NR和FNR这两个变量的用法对于高效地进行数据处理尤为重要。本文将详细介绍NR和FNR的区别，并通过实际例子来帮助理解它们各自的功能。 #### 一、NR和FNR的不同之处 **NR**:...
linu awk命令详解_linuawk命令详解_
10-02
在Linux世界中，熟悉awk命令对于日常的系统管理和数据分析非常有用。 awk的工作原理是逐行读取输入文件，然后根据用户定义的模式和动作来处理这些行。模式通常是一个正则表达式，动作则是一段代码，awk会在匹配到...
详解Linux中的awk命令
09-14
【Linux中的awk命令详解】 awk是一个强大的文本分析工具，它在Linux环境中被广泛用于处理文本文件，特别是数据处理和报告生成。awk的工作方式是逐行读取文件，并根据指定的规则对每一行进行分析和操作。它有三个...
LINUX中详解AWK内建变量FS,NF,NR,RT,RS,ORS,OFS
09-15
### Linux中AWK内建变量FS、NF、NR、RT、RS、ORS、OFS详解 #### 一、概述 AWK是一种强大的文本处理工具，主要用于格式化文本数据，广泛应用于Linux/Unix环境中。它拥有丰富的内置变量和函数，使得用户能够方便地...
awk NR和FNR区别（直观对比）
qq_49296785的博客
11-24 581
NR：表示awk开始执行程序后所读取的数据行数 从头到尾自增序号 FNR：awk每打开一个新文件 FNR便从0重新累计 换文件便初始序号
awk中的NR FNR
wolfzhaoshuai的专栏
07-17 1326
shell编程中，awk简直就是一把利器，你可以把它看成shell的一部分，也可以看成一种单独的语言，功能十分强大。今天先来说一说NR与FNR 先准备两个文件： 1.txt，内容为： user password wolf 123456 zys 123 2.txt 内容为： id user 0001 wolf 0002 xiaozhai 其实在处理单个文件时，NR与FNR都一
awk的NR、FNR、next的用法
WorldMvp的专栏
02-25 5040
NR：表示awk开始执行程序后所读取的数据行数。 FNR：与NR功用类似，不同的是awk每打开一个新文件，FNR便从0重新累计。 下面给出2个示例，展示awk的NR、FNR、next的用法。 示例1: 文件file1内容: $ cat file 0012BBB 300.00 20050621 0013DDD 400.00 20050622 0014FFF 500.00 20050401 文件file2内容: cat file2 I001111111 I001222222 I001...
awk之NR==FNR问题
大叶子不小的博客
07-04 1433
NR,表示awk开始执行程序后所读取的数据行数. FNR,与NR功用类似,不同的是awk每打开一个新文件,FNR便从0重新累计. 下面看两个例子: 1,对于单个文件NR 和FNR 的 输出结果一样的 ： 1 2 3 4 5 6 7 8 9 # awk '{print NR,$0}' file1 1 a b c d 2 a b d c 3 a c b d #awk '
awk程序语言 linux,AWK的NR和FNR详解
weixin_30342363的博客
05-12 612
书上说:NR,表示awk开始执行程序后所读取的数据行数.FNR,与NR功用类似,不同的是awk每打开一个新文件,FNR便从0重新累计.下面看两个例子:1,对于单个文件NR 和FNR 的 输出结果一样的 ：# awk '{print NR,$0}' file11 a b c d2 a b d c3 a c b d#awk '{print FNR,$0}' file11 a b c d2 a b d ...
linux awk命令NR详解,linux awk命令详解
weixin_28685483的博客
04-28 3811
简介awk命令的名称是取自三位创始人Alfred Aho 、Peter Weinberger 和 Brian Kernighan姓名的首字母，awk有自己的程序设计语言，设计简短的程序，读入文件，数据排序，处理数据，生成报表等功能。awk 通常用于文本处理和报表生成，最基本功能是在文件或者字符串中基于指定规则浏览和抽取信息，awk抽取信息后，才能进行其他文本操作。awk 通常以文件的一行为处理单位...
linux awk命令NR详解
08-17
在Linux中，awk是一种强大的文本处理工具，可以用于数据提取和转换。NR是awk命令中的一个内置变量，代表当前正在处理的记录（行）数。在awk命令中，可以使用NR来实现对记录数的操作。 引用中的awk命令示例中，'BEGIN {commands} pattern {commands} END {commands}'是awk命令的基本语法格式。在这个语法中，可以在BEGIN块中执行一些初始化操作，然后在pattern和commands之间对满足条件的行进行处理，最后在END块中执行一些善后操作。 引用提供了awk的简要描述，指出awk是一种用于模式扫描和处理的语言。 引用中的awk命令示例展示了如何使用awk来查找包含"mysql"的行，并打印整行内容。在这个命令中，'/mysql/'是一个pattern，表示要匹配包含"mysql"的行，然后使用print $0打印整行内容。 因此，NR是awk命令中的一个内置变量，用于表示当前正在处理的记录数，可以在awk命令中使用NR来实现对记录数的操作。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *2* [Linux - awk命令详解](https://blog.csdn.net/qq_48391148/article/details/125602640)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 50%"] - *3* [linux awk命令详解](https://blog.csdn.net/weixin_42111719/article/details/126032355)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值