linux过滤两行内容,Linux中Awk常用文本处理[2]

最新推荐文章于 2023-10-02 00:04:53 发布
最新推荐文章于 2023-10-02 00:04:53 发布
阅读量671 收藏
点赞数
文章标签： linux过滤两行内容

I. NR,FNR记录当前行

[root@LinuxEA awk]# cat nr1

1 a

2 b

3 c

4 d

5 e

[root@LinuxEA awk]# awk '{print FNR}' nr1

1

2

3

4

5

6

[root@LinuxEA awk]# awk '{print NR}' nr1

1

2

3

4

5

6

[root@LinuxEA awk]# awk '{print "行. = " NR " 数据 = " RNR,$0}' nr1

行. = 1 数据 = 1 a

行. = 2 数据 = 2 b

行. = 3 数据 = 3 c

行. = 4 数据 = 4 d

行. = 5 数据 = 5 e

行. = 6 数据 =

[root@LinuxEA awk]#

II. AWK引入变量：

[root@LinuxEA awk]# VAR=linuxea

[root@LinuxEA awk]# awk -v var=$VAR 'BEGIN{print var}'

linuxea

[root@LinuxEA awk]# awk 'BEGIN{print "'$VAR'"}'

linuxea

[root@LinuxEA awk]#

III. OFS输出字段分隔符

[root@LinuxEA awk]# echo 'linuxea.com linuxea.com linuxea.com' |awk -v OFS="---" '{$1=$1;print $0}'

linuxea.com---linuxea.com---linuxea.com

[root@LinuxEA awk]#

[root@LinuxEA awk]# echo 'linuxea.com linuxea.com linuxea.com' |awk -v OFS="---" '{NF++0;print $0}'

linuxea.com---linuxea.com---linuxea.com---

[root@LinuxEA awk]# echo 'linuxea.com linuxea.com linuxea.com' |awk -v OFS="---" '{NF+=0;print $0}'

linuxea.com---linuxea.com---linuxea.com

[root@LinuxEA awk]#

IV. awk实现点分十进制的ip地址转换数字格式

[root@LinuxEA awk]# echo 8.8.8.8 |awk -F. '{n=0;for(i=1;i<=NF;i++){n*=256;n+=$i}print n}'

134744072

[root@LinuxEA awk]#

[root@LinuxEA awk]# echo 8.8.8.8|awk -F. '{printf "%d\n", ($1*(2^24))+($2*(2^16))+($3*(2^8))+$4}'

134744072

[root@LinuxEA awk]#

[root@LinuxEA awk]# ping 134744072

PING 134744072 (8.8.8.8) 56(84) bytes of data.

64 bytes from 8.8.8.8: icmp_seq=1 ttl=44 time=66.3 ms

64 bytes from 8.8.8.8: icmp_seq=2 ttl=44 time=76.9 ms

[root@LinuxEA awk]# echo 00001000.00001000.00001000.00001000|awk -F. 'function bin2dec(a,b,i,c){b=length(a);c=0;for(i=1;i<=b;i++){c+=c;if(substr(a,i,1)=="1")c++}return c}{for(j=1;j<=NF;j++)printf("%d%s",bin2dec($j),j!=NF?".":"\n")}'

8.8.8.8

[root@LinuxEA awk]#

V. 选择性打印

VI. 取其前一行

源文件：

[root@LinuxEA awk]# cat nr1

1 a

2 b

3 c

4 d

5 e

当pattern等于5时，打印前一行

[root@LinuxEA awk]# awk '!/5/{a=$0}/5/{print a}' nr1

4 d

[root@LinuxEA awk]# awk '/5/{print i};i=$0{}'

4 d

如果取前2行则借助一下属组，以前两行为例

[root@LinuxEA awk]# awk '{a[NR]=$0}/5/{p=NR}END{for(i=p-2;i

3 c

4 d

VII. 如果取其后两行

已知从3行开始，从3到5行内容

[root@LinuxEA awk]# awk '/3/{p=1;a=NR}p&&NR-x<=5&&NR-x>0' nr1

3 c

4 d

5 e

[root@LinuxEA awk]#

VIII. 取出现匹配次数

源数据：

[root@LinuxEA awk]# cat nr1

1 a

2 b

3 c

2 b

4 d

5 e

6 f

7 g

[root@LinuxEA awk]#

IX. 出现第一次匹配取后一行

[root@LinuxEA awk]# awk '/2 b/{a++;b=NR}a==1&&NRb<=1 && NR-x>0' nr1

2 b

3 c

X. 出现第二次匹配，打印下面的行

[root@LinuxEA awk]# awk '/2 b/{a++;b=NR}a==2&&NRb<=2 && NR-b>0' nr1

4 d

5 e

6 f

7 g

[root@LinuxEA awk]#

XI. 匹配中间数据

取出1 a 到4 d中间的数据

包括匹配行

[root@LinuxEA awk]# awk '/1 a/{p=1}/4 d/{print;p=0}p' nr1

1 a

2 b

3 c

2 b

4 d

[root@LinuxEA awk]#

不包括1 a行

[root@LinuxEA awk]# awk '/1 a/{p=1;next}/4 d/{print;p=0}p' nr1

2 b

3 c

2 b

4 d

[root@LinuxEA awk]#

不包括4 d行

[root@LinuxEA awk]# awk '/1 a/{p=1}/4 d/{p=0}p' nr1

1 a

2 b

3 c

2 b

[root@LinuxEA awk]#

不打印匹配行

[root@LinuxEA awk]# awk '/1 a/{p=1;next}/4 d/{p=0}p' nr1

2 b

3 c

2 b

[root@LinuxEA awk]#

XII. 过滤关键字中间的行

保留123(linuxea)和xaca(linuxea)中含有关键字的数据

实例文件

[root@LinuxEA awk]# cat file289

aaa

bbb

ccs

ddw

weq

123(linuxea)

szxc

sdaq

AZCA

SDQWQ

XXCA

ASDQ

XACA(linuxea)

BBB

[root@LinuxEA awk]#

保留123(linuxea)和xaca(linuxea)中含有关键字的数据

第一种方式：

将标签P作为数据下表，将123到结尾数据存入数组中，最后打印匹配linuxea值

[root@LinuxEA awk]# awk '/123/{p++}/./{a[p]=a[p]"\n"$0}END{for(i=1;i<=p;i++) if(a[i]~/\(linuxea\)/) print a[i]}' file289

123(linuxea)

szxc

sdaq

AZCA

SDQWQ

XXCA

ASDQ

XACA(linuxea)

BBB

[root@LinuxEA awk]#

第二种方式：

利用awk内置函数RS

[root@LinuxEA awk]# awk -v RS="123" '/linuxea/{print RS $0}' file289

123(linuxea)

szxc

sdaq

AZCA

SDQWQ

XXCA

ASDQ

XACA(linuxea)

BBB

[root@LinuxEA awk]#

XIII. 统计关键字的行

[root@LinuxEA awk]# cat file299

head no

1235 linuxea mark 1 @09 linuxea.com

1235 mark

head no

1234 mark linuxea.com

1235 mark

1235 mark linuxea.com

head no

1235 mark linuxea.com

1235 mark

1235 mark linuxea.com

1235 mark linuxea.com

统计linuxea.com的行数

[root@LinuxEA awk]# awk '/no/{p++;b[p]=$0}/linuxea.com/{a[p]++}END{for(i=1;i<=p;i++) print b[i],a[i]}' file299

head no 1

head no 2

head no 3

[root@LinuxEA awk]#

XIV. 打印奇数偶数行数

[root@LinuxEA awk]# cat file2991

1

2

3

4

5

6

7

8

9

10

[root@LinuxEA awk]# awk p++%2 file2991

2

4

6

8

10

[root@LinuxEA awk]# awk ++p%2 file2991

1

3

5

7

9

##　打印匹配关键字的行号

linuxea.com

[root@LinuxEA awk]# cat 1006

123

abc

aaaa

vwd

vvvvvv

deafwq

linuxea.com

dddddddddd

aaaaaaa

打印关键字vwd后出现的第一个linuxea.com所处行的行号

[root@LinuxEA awk]# awk '/linuxea.com/{p=NR}/vwd/{x=NR}p>x&&x>0{print p;exit}' 1006

7

[root@LinuxEA awk]#

XV. 取其关键字后N行

[root@LinuxEA awk]# awk '/vwd/{i=3;next}--i>=0' 1006

vvvvvv

deafwq

linuxea.com

[root@LinuxEA awk]#

取其关键字前三行

[root@LinuxEA awk]# awk '/\/{for(i=NR-3;i

123

abc

aaaa

[root@LinuxEA awk]# awk '{a[NR]=$0}/\/{for(i=NR-3;i

123

abc

aaaa

[root@LinuxEA awk]# awk '{a[NR]=$0}/vwd/{p=NR}END{for(i=p-3;i

123

abc

aaaa

[root@LinuxEA awk]# awk '{a[NR]=$0}/vwd/{for(i=NR-3;i

123

abc

aaaa

[root@LinuxEA awk]#

5c1967c5325842cec010c6abd3e07965.gif

除非另有说明，否则本站上的内容根据以下许可进行许可: CC署名-非商业性使用-相同方式共享4.0国际许可协议4.0进行许可

本文作者：www.linuxea.com for Mark

文章链接：http://www.linuxea.com/1464.html (转载请注明本文出处和本章链接)

帕腓尼基
关注
awk过滤文本行
ecjtusbs的博客
12-09 2326
awk
linux 去除文件里面第二行数据,运用sed命令高效地删除文件的特定行
weixin_34663443的博客
05-16 2224
正常来说，我们想要删除文件中的某些行内容，一般都是先打开这个文件，然后找到要删除的内容，再然后选中这些行并按删除键进行删除，这在数据量很少时是没有问题的。但是，一旦文件中的行数据非常多，而且数据冗杂的情况下，你还要用上面的方法去做的话就很恐怖了。为此，今天这篇文章将带大家一起学习运用 sed行工具，即使在数据多而杂的情况下也能高效而优雅地删除文件中的特定行内容。ed 是 Stream Editor...
linux逐行连接两个文件,awk将两个文件逐行连接
weixin_35618196的博客
05-14 799
将两个文档逐行连接，比如：a文件内容是a 1b 2c 3b文件内容是a 5b 6结果是a 1 5b 2 6c 3awk代码为:awk '{a[$1]=a[$1]" "$2}END{for (j in a) print j""a[j]}' a b说实话，这行代码相当难以理解。看完了awk的语法，也没有发现类似的用法。使用谷歌找到了一个解释。{ a[$1]=a[$1]" " $2; next } me...
Linux过滤命令awk,利用linux命令行工具进行文本行过滤的方法
weixin_42298971的博客
04-29 586
在日常工作中会遇到需要筛选过滤要查看的日志等文本文件的任务，例如需要查看日志文件的最后几行等。下面总结一下常见的对文本行过滤的方法。一起去看看吧！常用命令行工具接下来主要使用的是head，tail，sed和awk，这几个工具。其中sed和awk工具非常强大，使用它们来进行文本的过滤可能有点大材小用，不过基本上所有的任务都可以通过head和tail两个命令来完成，而且head和tail日常使用更加方...
AWK 找到了两行，如果想找root开头的行
热门推荐
11-12 3万+
找到了两行，如果想找root开头的行: awk -F ":" '/^root/ {print $1, $3, $0}' password root 0 root:x:0:0:root:/root:/bin/bash
linux文本切割awk,文本处理工具之awk
weixin_42297439的博客
05-13 1155
文本处理工具之AWK一、linux文本处理工具三剑客：grep、sed、awk。其中grep是一种文本过滤器，sed是文本行编辑器，而awk是一种报表生成器，就是对文件进行格式化处理的，这里的格式化不是文件系统的格式化，而是对文件内容进行各种“排版”，进而格式化显示。在linux上我们使用的是GNU awk 简称 gawk，并且gawk是awk的链接文件，因此在系统上使用gawk和awk效果一样二...
深入了解 Linux 中的 AWK 命令：文本处理的瑞士军刀
最新发布
weixin_60461563的博客
10-02 789
在Linux和Unix操作系统中，文本处理是一个常见的任务。AWK命令是一个强大的文本处理工具，专门进行文本截取和分析，它允许你在文本文件中查找、过滤、处理和格式化数据。本文将深入介绍Linux中的AWK命令，让你了解其基本用法和高级功能，以便更高效地处理文本数据。
linux awk输出到文件内容,使用awk格式化输出文本
weixin_35537635的博客
05-06 3900
注意：本文并不是一篇awk入门文章，而是偏重实例讲解awk借鉴了c语法，因此awk在许多地方还保留有C语言的痕迹，比如printf语句；for，if的语法结构等介绍最简单地说，AWK 是一种用于处理文本的编程语言工具，处理模式是只要在输入数据中有模式匹配，就执行一系列指令。awk命令格式为：awk {pattern + action} {filenames}awk可以读取后接的文件，也可以读取来自...
浅谈linux中sed命令和awk命令的使用
09-15
在Linux系统中，`sed`（流编辑器）和`awk`是两个强大的文本处理工具，常用于数据的检索、转换和报告生成。这两个命令在处理日志文件、配置文件等大量文本数据时非常有用。 1. **sed命令**： - **查询语句**：`sed`...
linux awk提取txt文件中的数字,awk：一个强大的文本分析工具
weixin_42405368的博客
05-15 2234
原标题：awk：一个强大的文本分析工具 awk是流式编辑器，针对文档中的行来操作，一行一行地执行。awk可以非常方便、高效地操作文档以及字符，从而实现我们想要的格式。它的功能非常强大，我在 shell 脚本中经常使用它来处理字符串。下面介绍几个在工作中使用awk较频繁的用法。1. 截取文档中的某个段示例命令如下：# head -n2 test.txt |awk -F ':' '{print $1}...
linux shell 显示(过滤）指定符号之间文字 (使用cut命令）
qq_23060921的博客
12-11 839
cat mail aa宏 <xinhong@xxx.com>; aa徒 <xiyutu@xxx.com>; aa跃 <xengyue@xxx.com>; aa英 <qunying@xxx.com>; dd晶iaa <jing@xxx.com>; cc华新 <zuxin@xxx.com>; xx阔 <ron...
Linux三剑客-awk专治 行间字段
穷则独善其身 达则兼善天下
05-20 505
awk一.工作原理① 命令格式② awk常见的内建变量(可直接用)如下所示二.按行输出文本三.按字段输出文本四.通过管道，双引号调用shall命令五.使用awk统计httpd访问日志中每个客户端IP的出现次数六.cpu负载,内存容量,硬盘空间,网卡流量,安装的软件包数量,账户数量,当前登录的账户数量,进程数量,输错密码的主机 一.工作原理 • 逐行读取文本，默认以空格或tab键为分隔符进行分隔，将分隔所得的各个字段保存到内建变量中，并按模式或者条件执行编辑命令 • sed命令常用于一整行的处理，而awk比较
Linux常用指令之 AWK(过滤搜索)
zl378837964的专栏
12-06 7264
什么是awk?         与其它大多数UNIX命令不同的是，从名字上看，我们不可能知道awk的功能：它既不是具有独立意义的英文单词，也不是几个相关单词的缩写。事实上，awk是三个人名的缩写，他们是：Aho、(Peter)Weinberg和(Brain)Kernighan。正是这三个人创造了awk---一个优秀的样式扫描与处理工具。          AWK的功能是什么？与sed和gr...
linux下如何获得特定字符串前后几行文本
zhaolixin0726的博客
11-10 9855
如果要获得一个文件中的最后几行，使用tail命令就可以很方便的实现。但在有些时候，会需要用到如标题中所描述的功能。 我举一个具体的例子：在使用VASP计算弹性常数时，结果就是在字符串“TOTAL ELASTIC MODUII” 之后的几行，但这整个部分是在文件的中间，如果将这部分数据提取出来呢？ 使用grep命令可以比较轻松达到目的，具体使用如下： 01
Linux下面整理数据的awk
天之彼方的博客
10-26 4046
工作中常用的awk命令和含义
文本三剑客——awk 截取+过滤+统计
m0_52165864的博客
08-01 7298
使用awk命令可以按照分割符将一行分割为多个列，第一列用$1表示，第二列用$2表示，依次类推。
使用awk排除第一行和第二行的数据
zhengxiuchen86的博客
12-27 3975
本文转载自：https://www.cnblogs.com/aguncn/p/5857517.html 作者：aguncn 转载请注明该声明。　　因为linux shell命令行输出的前面几行一般是指导或是格式字段说明， 而不是实现的数据，所以在作过滤时，一般需要排除前面的几行。 现需要找出指定机器开放的所有端口。 我遇到的情况是要排除前面两行，再进行切割。 如下： netsta...
Linux系统:文件内容筛选（grep、awk）
白骨梦儿
05-08 1万+
1.grep Grep是linux中自带的文件内容筛选工具,grep使用格式：grep [options] 1.查询：grep [keyword] filename 在filename中查询包含keyword的行 2.显示行号：-n 3.统计次数：-c 4.忽略大小写：-i 5.逆向查找，输出不符合项：-v 下面一一截图： 2.awk Awk也是linux中自...
如何用awk过滤最后一行的？
tangxc10的专栏
08-09 9017
最近需要对fasta文件的id进行处理，输入的ID格式如下： 而我要处理成: 也就是过滤文件的最后一列，目前过滤文件的最后一列的方法有如下： (1) awk '{print $1"\t"$2"\t"$3"\t"$4"\t"$5}'  解析：因为该文件有六列，过滤最后一列也就是只打印前五列，但是存在的问题是：awk打印出来的第一列和第二列之间的空格数对应不起来 (2
Linux系统管理：掌握sed与awk文本处理技巧
"《sed & awk》中文版是关于Linux环境下使用sed和awk这两个强大的文本处理工具的书籍。这本书旨在帮助读者掌握正则表达式、学会使用sed进行文本行编辑以及利用awk处理复杂的文本任务。标签包括awk、Linux和Unix，...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值