一、awk概述
1、概念
awk 是一种编程语言,用于在linux/unix下对文本和数据进行处理。数据可以来自标准输(stdin)、一个或多个文件,或其它命令的输出。它在命令行中使用,但更多是作为脚本来使用。awk有很多内建的功能,比如数组、函数等,这是它和C语言的相同之处,灵活性是awk最大的优势。
2、工作原理
- 逐行读取文本,默认以空格或tab键为分隔符进行分隔,将分隔所得的各个字段保存到内建变量中,并按模式或者条件执行编辑命令。
- awk倾向于将一行分成多个"字段"然后再进行处理。
- awk信息的读入也是逐行读取的,执行结果可以通过print的功能将字段数据打印显示。
- 使用awk命令的过程中,可以使用逻辑操作符"&&"表示"与"、"|"表示"或"、"!"表示"非",还可以进行简单的数学运算,如+、-、*、/、%、^分别表示加、减、乘、除、取余和乘方。
二、akw用法
1、常见的内置变量
内置变量 | 含义 |
$0 | 当前处理的行的整行内容 |
$n | 当前处理行的第n个字段(第n列) |
NR | 当前处理的行的行号(序数) |
NF | 当前处理的行的字段个数。$NF代表最后一个字段 |
FS | 列分割符。指定每行文本的字段分隔符,默认为空格或制表位。与"-F"作用相同 |
OFS | 输出内容的列分隔符 |
FILENAME | 被处理的文件名 |
RS | 行分隔符。awk从文件中读取资料时,将根据RS的定义把资料切割成许多条记录, 而awk一次仅读入一条记录进行处理。预设值是"\n" |
2、常用参数
-F 指定分隔符(可以是字符串或正则表达式;如-F:)
-f 从脚本文件中读取awk命令
-v var=value 赋值变量,将外部变量传递给awk
3、语法格式
awk 选项 '模式或条件 {操作}' 文件1 文件2
awk -f 脚本文件 文件1 文件2
4、按行输出内容
1)$0表示当前行的整行内容
2)使用NR指定行号
打印1到4行,逗号表示连续的行内容,&&表示“且” 符号"||"(表示“或”)打印奇数行;打印偶数行(将行号除以2取余数,余1是奇数行,余0是偶数行)
3)$n表示当前处理行的第n个字段
4)通过文本模式过滤出行
和正则表达式结合,通过匹配字符串过滤出想要的行
输出包含root的行输出以root开头的行;输出以bash结尾的行
5、按字段输出内容
1)使用-F指定分隔符
2)打印UID大于500的用户、打印UID小于等于500的用户(!取反)
3)使用if语句