awk

最新推荐文章于 2022-11-26 22:17:49 发布
最新推荐文章于 2022-11-26 22:17:49 发布
阅读量885 收藏 1
点赞数
分类专栏： shell
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_41729148/article/details/89165316
版权

shell中的颜色处理

注意事项：
1、字背景颜色和文字颜色之间是英文的分号
2、文字颜色后面有个m 
3、字符串前后可以没有空格，如果有的话，输出也是同样有空格 
4、echo显示带颜色，需要使用参数-e 
\033[0m 关闭所有属性 
\033[1m 设置高亮度，加粗
\033[5m 闪烁

[root@break du]# echo -e "\033[42;34m hello world \033[0m"
 hello world 
[root@break du]# echo -e "\033[34;34m hello world \033[0m"
 hello world 
 [root@break du]# echo -e "\e[25;34m hello world \e[0m"
 hello world

在这里插入图片描述
在这里插入图片描述

awk

awk是由模式和动作组成。
模式：
正则表达式 :  /root/ 匹配含有root的行     	/*.root/
关系表达式：  <  >  &&  ||   +  *
匹配表达式：  ~  ！~
动作：
变量  命令  内置函数  流控制语句
工作流程：读，写，重复读写
自定义变量：（1-6常用）
$n 当前记录的第n个字段，比如: $1表示第一个字段，$2表示第二个字段 
$0 这个变量包含执行过程中当前行的文本内容
FILENAME 当前输入文件的名
FS 字段分隔符（默认是空格） 
NF 表示字段数，在执行过程中对应于当前的字段数，NF：列的个数
NR 表示记录数，在执行过程中对应于当前的行号
FNR  各文件分别计数的行号
OFS 输出字段分隔符（默认值是一个空格）
ORS 输出记录分隔符（默认值是一个换行符）
RS 记录分隔符（默认是一个换行符）
常见的命令参数：
	-F  fs指定分隔符
	-v 赋值一个用户自定义变量
	-f 指定脚本文件,从脚本中读取awk命令

基于awk的简单实例

#指定分隔符
[root@break du]# echo A B C D ASD ASD | awk -F " " '{print $2}'
B
[root@break du]# echo "a|b|c|d" |awk -F "|" '{print $3}'
c
[root@break ~]# echo "12ax4576ax789ax978ax890" | awk -F "ax" '{print $3}'
789
#指定多个分隔符
[root@break ~]# echo "12ax4576ax789ax978ax890" | awk -F '[a8]' '{print $3}'
x7
[root@break ~]# awk -F: '{print $1}' /etc/passwd | head -5
root
bin
daemon
adm
lp
#使用预定义的变量和BEGIN
[root@break ~]# echo "12ax4576ax789ax978ax890" | awk -F "ax" '{print $3}'
789
[root@break ~]# echo "12ax4576ax789ax978ax890" | awk 'BEGIN {FS="ax"} {print $3}'
789
#取出IP地址
[root@break ~]# ifconfig ens33 | grep netmask
        inet 192.168.1.63  netmask 255.255.255.0  broadcast 192.168.1.255
[root@break ~]# ifconfig ens33 | grep netmask | awk '{print $2}'
192.168.1.63

基于awk的关系运算符

[root@break ~]# echo "3 2 4 5 6 23 32 2" >a.txt
[root@break ~]# awk '{print $1+10}' a.txt
13
[root@break ~]# vim a.txt 
[root@break ~]# cat a.txt 
3 2 4 5 6 23 32 2
1 34 654 567 89 8679
213 43 543 65 765 8
[root@break ~]# awk '{print $1+10}' a.txt
13
11
223
[root@break ~]# echo "q w e r t y u" | awk '{print $3}'
e
[root@break ~]# echo "q w e r t y u" | awk '{print $NF}'
u
[root@break ~]# echo "q w e r t y u" | awk '{print $(NF)-3}'
-3
[root@break ~]# echo "q w e r t y u" | awk '{print $(NF-3)}'
r

打印出passwd文件中用户UID小于10的用户名和它登录使用的shell

[root@break ~]# awk -F: '$3<10{print $1 ":" $NF}' /etc/passwd
root:/bin/bash
bin:/sbin/nologin
daemon:/sbin/nologin
adm:/sbin/nologin
lp:/sbin/nologin
sync:/bin/sync
shutdown:/sbin/shutdown
halt:/sbin/halt
mail:/sbin/nologin
#单引号和双引号的区别
[root@break ~]# awk -F: '$3<10{print $1 "\t" $NF}' /etc/passwd
root	/bin/bash
bin	/sbin/nologin
[root@break ~]# awk -F: '$3<10{print $1 '\t' $NF}' /etc/passwd
root/bin/bash
bin/sbin/nologin
[root@break ~]# awk -F: '$3>=1000 && $NF=="/bin/bash"{print $1 "\t" $NF}' /etc/passwd
du	/bin/bash

统计内存中的使用情况

统计当前内存的使用情况
内存的使用率：45.005%
[root@break ~]# cat mem.sh 
#!/bin/bash
echo "统计当前内存的使用情况"
U=`free -m | grep Mem | awk '{print $3/$2*100"%"}'`
echo -e "内存的使用率：\e[34:43m${U}\e[0m"

添加开始和结束的脚本

[root@break ~]# awk -f test.awk /etc/passwd
USERId			Shell
*****************
du                   /bin/bash           
******************
[root@break ~]# cat test.awk 
BEGIN{
	print "USERId\t\t\tShell"
	print "*****************"
	FS=":"
	}
$3>=500 && $NF=="/bin/bash"{
	printf "%-20s %-20s\n", $1,$NF	
}

END{
	print "******************"
}

awk的高级应用

高级使用参数说明：
	-F		指定分隔符
	-f		调用脚本
	-v		定义变量
	‘{}’	引用代码块
     {…}		命令代码块，包含一条或多条命令
	BEGIN	初始化代码块
	/ str /		匹配代码块，可以是字符串或正则表达式
	{print A；print B}		多条命令使用分号分隔
	END		结尾代码块
在awk中，pattern有以下几种：
1）empty空模式，这个也是我们常用的
2）/regular expression/  仅处理能够被这个模式匹配到的行

#打印以root开头的行
[root@break ~]# awk -F: '/^root/{print $1}' /etc/passwd
root
#输出行号大于等于3且行号小于等于6的行
[root@break ~]# awk -F: '(NR>=3&&NR<=6){print NR,$0}' /etc/passwd
3 daemon:x:2:2:daemon:/sbin:/sbin/nologin
4 adm:x:3:4:adm:/var/adm:/sbin/nologin
5 lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
6 sync:x:5:0:sync:/sbin:/bin/sync
#提取IP地址（通过行号和通过关键字都可以来进行定位）
[root@break ~]# ifconfig ens33 | awk -F ' ' 'NR==2{print $2}'
192.168.1.63

NR和FNR的区别:NR是对于不同的文件都记录行数，FNR是根据不同的文件来分别记录文件的个数

[root@break ~]# awk '{print NR"\t" $0}' /etc/hosts /etc/hostname 
1	127.0.0.1   localhost localhost.localdomain localhost4 localhost4.localdomain4
2	::1         localhost localhost.localdomain localhost6 localhost6.localdomain6
3	break.cn
[root@break ~]# awk '{print FNR"\t" $0}' /etc/hosts /etc/hostname 
1	127.0.0.1   localhost localhost.localdomain localhost4 localhost4.localdomain4
2	::1         localhost localhost.localdomain localhost6 localhost6.localdomain6
1	break.cn

使用3种方法去除首行

[root@break ~]# route -n | grep -v ^Kernel
Destination     Gateway         Genmask         Flags Metric Ref    Use Iface
0.0.0.0         192.168.1.1     0.0.0.0         UG    100    0        0 ens33
192.168.1.0     0.0.0.0         255.255.255.0   U     100    0        0 ens33
192.168.122.0   0.0.0.0         255.255.255.0   U     0      0        0 virbr0
[root@break ~]# route -n | awk 'NR!=1{print $0}'
Destination     Gateway         Genmask         Flags Metric Ref    Use Iface
0.0.0.0         192.168.1.1     0.0.0.0         UG    100    0        0 ens33
192.168.1.0     0.0.0.0         255.255.255.0   U     100    0        0 ens33
192.168.122.0   0.0.0.0         255.255.255.0   U     0      0        0 virbr0
[root@break ~]# route -n | sed 1d
Destination     Gateway         Genmask         Flags Metric Ref    Use Iface
0.0.0.0         192.168.1.1     0.0.0.0         UG    100    0        0 ens33
192.168.1.0     0.0.0.0         255.255.255.0   U     100    0        0 ens33
192.168.122.0   0.0.0.0         255.255.255.0   U     0      0        0 virbr0

匹配，使用awk查出以包括root字符的行 ， 有以下3种方法

[root@break ~]# awk -F: "/root/{print}" /etc/passwd
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin
[root@break ~]# awk -F: "/root/" /etc/passwd
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin
[root@break ~]# awk -F: "/root/{print $0}" /etc/passwd


[root@break ~]# awk -F: '/root/{print $0}' /etc/passwd
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin

如果passwd中UID小于10，则给变量USER赋值成aaa，否则赋值成bbb

[root@break ~]# awk -F: '{$3<10? USER="aaa":USER="bbb";print $1,USER}' /etc/passwd |head -4
root aaa
bin aaa
daemon aaa
adm aaa

如果UID大于10 ，则输出user=>用户名，否则输出pass=>用户名

[root@break ~]#  awk -F: '{if($3<10){print "user=>"$1}else{print "pass=>"$1}}' /etc/passwd | head -4
user=>root
user=>bin
user=>daemon
user=>adm

查出行号小于等于5且包括bin/bash的行

[root@break ~]# awk -F: '{if($3<=5 && $NF ~ "bin/bash"){print $1,$NF}}' /etc/passwd
root /bin/bash

使用单引号和双引号一起括起来

[root@break ~]# awk 'BEGIN{print "$var"}'
$var
[root@break ~]# awk 'BEGIN{print "'$var'"}'
asdf

格式化输出

[root@break ~]# awk -F: '{printf "%s",$1}' /etc/passwd 
rootbindaemonadmlpsyncshutdownhaltmailoperatorgamesftpnobodysystemd-networkdbuspolkitdlibstoragemgmtrpccolordsaslauthabrtsetroubleshootrtkitchronyrpcusernfsnobodyqemuunboundglustertssusbmuxdgeoclueradvdpulsegdmgnome-initial-setupsshdavahipostfixntptcpdumpdu
[root@break ~]# awk -F: '{printf "%s\n",$1}' /etc/passwd | head -4
root
bin
daemon
adm

在输出的字母前面添加自定义字符串username

[root@break ~]# awk -F: '{printf "username:%s\n",$1}' /etc/passwd | head -4
username:root
username:bin
username:daemon
username:adm

前后都做格式化输出

[root@break ~]# awk -F: '{printf "username:%s %s\n",$1,$NF}' /etc/passwd | head -4
username:root /bin/bash
username:bin /sbin/nologin
username:daemon /sbin/nologin
username:adm /sbin/nologin

内容的左右对齐

[root@break ~]# awk -F: '{printf "%10-s\n",$1}' /etc/passwd | head -5
root      
bin       
daemon    
adm       
lp        
[root@break ~]# awk -F: '{printf "%10s\n",$1}' /etc/passwd | head -5
      root
       bin
    daemon
       adm
        lp

第1列使用15个字符宽度左对齐输出，最后一列使用15个字符宽度右对齐输出

[root@break ~]# awk -F: '{printf "USERNAME: %-15s %15s\n",$1,$NF}' /etc/passwd | head -5
USERNAME: root                  /bin/bash
USERNAME: bin               /sbin/nologin
USERNAME: daemon            /sbin/nologin
USERNAME: adm               /sbin/nologin
USERNAME: lp                /sbin/nologin
_ady
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Linux awk命令详解，阿里开发7年大牛
2401_83739727的博客
03-30 1070
awk -F: ‘{print $NF}’ /etc/passwd //将每行第NF个字段的值打印出来awk -F: ‘NF==4 {print }’ /etc/passwd //显示只有4个字段的行awk -F: ‘NF>2{print $0}’ /etc/passwd //显示每行字段数量大于2的行。
AWK
02-18
AWK
awk基础用法详解
qq_33172851的博客
11-26 2762
awk用法-内置变量-函数-条件语句
awk详细教程：第二部分
weixin_34314962的博客
04-16 128
2.3 表达式和运算符 awk允许使用正则表达式，根据正则表达式是否匹配当前行来选择执行独立代码块。以下示例脚本只输出bill中包含字符序列8613902700003的那些行： awk'/8613902700003/{print}'bill 当然，可以使用更复杂的正则表达式： /[0-9]*/{print} 下面列出正则表达式元字符：...
awk是什么？awk工作原理是什么？怎么用awk？
vecloud的博客
10-14 3155
一、awk介绍 1. awk概述awk是一种==编程语言==，主要用于在linux/unix下对==文本和数据==进行处理，是linux/unix下的一个工具。数据可以来自标准输入、一个或多个文件，或其它命令的输出。awk的处理文本和数据的方式：==逐行扫描==文件，默认从第一行到最后一行，寻找匹配的==特定模式==的行，并在这些行上进行你想要的操作。awk分别代表其作者姓氏的第一个字母。因为它的作者是三个人，分别是Alfred Aho、Brian Kernighan、Peter Wein...
awk 个别运算符详解
MiltonZhong
07-08 1044
1.6 awk关系、布尔运算符、表达式 AWK的大部分运算符及其意义与C/C++、Java、Linux等相似，如： > 大于 >= 大于等于 == 等于 != 不等于 || 逻辑或 && 逻辑与 ! 逻辑非 + 加 - 减 * 乘 / 除 % 模 ^或** 乘方 ++x 在返回x值之前，x变量加1 x++ 在返回x值之后，x变量加1   AWK独有的运算
linux脚本加标题,linux – awk脚本标题：#！/ bin / bash或#！/ bin / awk -f？
weixin_35992471的博客
04-30 525
在awk文件中,例如example.awk,标题应该是#！/ bin / bash还是#！/ bin / awk -f？我的问题的原因是,如果我在控制台中尝试此命令,我会收到带有“文本行”的正确file.txt：awk 'BEGIN {print "line of text"}' >> file.txt但如果我尝试使用./example.awk执行以下文件：#! /bin/awk -f...
JSON.awk:用AWK编写的实用JSON解析器
05-23
JSON.awk 用awk编写的实用JSON解析器。介绍JSON.awk是一个独立的单文件程序，没有任何外部依赖关系。 它类似于 ，这是用Bash编写的JSON解析器-于2013-03-13检索以构成JSON.awk的基础。 从那时起，这些项目便分开了...
awk入门到精通.pdf
08-24
此外, awk内建有pipe的功能, 可将处理中的数据传送给外部 的 Shell命令加以处理, 再将Shell命令处理后的数据传回awk程序, 这个特点也使得awk程序很 容易使用系统资源. 由于awk具有上述特色, 在问题处理的过程中, 可...
shell工具之awk
01-09
shell工具之awk ​ 一个强大的文本分析工具，把文件逐行的读入，以空格为默认的分割符并将每行切片，切开的部分在进行分析处理。 1.基本用法 awk [选项参数] ‘pattern1 {action} pattern2 {action}…’ filename ...
AWK简明教程
06-25
AWK简明教程 AWK是贝尔实验室1977年搞出来的文本出现神器，所以非常有必要为它写篇文章。之所以叫AWK是因为其取了三位创始人 Alfred Aho，Peter Weinberger, 和 Brian Kernighan 的Family Name的首字符。要学AWK，就...
redis-awk:awk 的 redis 客户端绑定（尤其是 gawk）
06-26
介绍Redis 客户端绑定， awk的 GNU 实现。 它的特点包括无全局变量污染具有可变长度参数列表的方便函数，尽管有限支持多个redis连接警告！！！ 由于awk/gawk不是为处理二进制数据而设计的，因此在 Redis 服务器中...
win_awk.zip
10-26
linux下强大的awk，在windows上也可以用了，当然有些细节不一样，将linux下的awk脚本移植到windows上时，要做一些小的修改
awk区间取值的例子
01-10
有如下的文本内容： ********* 123123 123123 ********* 321321 321321 ********* 456456 456456 ********* 123123 123123 ******** 匹配123，取出******区间的内容： awk -vRS=”*+” ‘/123/{print RT$0}’ file ...
awk学习手册.docx
08-09
awk从入门到精通， awk常用命令，参数，以及用法说明，相信通过本文档，你可以快速掌握awk工具
【Linux】awk命令详解
qi_lin7的博客
07-28 1400
[在此处输入文章标题]     awk命令 常用工具命令 本文索引 目录 awk命令 常用工具命令... 1 awk命令格式和选项... 1 awk模式和操作... 1 模式... 1 操作... 2 awk脚本基本结构... 2 awk的工作原理... 2 awk内置变量（预定义变量）... 3 将外部变量值传递给awk. 5 aw
【文本三剑客之一awk】
小小Python的博客
07-05 1141
一.awk是一门解释型的编程语言，适合于文本处理(行和列)和报表生成，它提供了正则表达式的匹配，流程控制，运算符，表达式，变量以及函数等一系列的程序设计语言所具备的特性。 简单来说awk就是把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行各种分析处理。三个版本：awk,nawk,gawk,一般未做说明是指gwak,gwak是awk的GNU版本。 [root@node1 ~]# ll /usr/bin/awk lrwxrwxrwx. 1 root root 4 2月 15 20:38 /us
Linux三剑客之awk命令详解
热门推荐
qq_57377057的博客
08-09 3万+
通常情况下awk所使用的命令格式如下，其中，单引号家伙是那个大括号“{ }”用于设置对于数据进行的处理动作。awk可以直接处理目标文件，也可以通过“-f”读取脚本对目标文件进行处理。awk 选项 '模式或条件{编辑指令}' 文件1 文件2 #过滤并输出文件中符合条件的内容awk -f 脚本文件 文件1 文件2 #从脚本中调用编辑指令，过滤并输出内容。...............
awk support
最新发布
04-24
awk是一种强大的文本处理工具，它在Unix和类Unix系统中广泛使用。它可以用于从文本文件中提取和处理数据，并且具有灵活的功能和语法。 awk支持以下功能： 1. 文本处理：awk可以逐行读取文本文件，并根据指定的规则...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值