第七章、grep及正则表达式
04_04_grep及正则表达式
grep家族: grep, egrep, fgrep
grep: 根据模式搜索文本,并将符合模式的文本行显示出来。
Pattern: 文本字符和正则表达式的元字符组合而成匹配条件
grep [options] PATTERN [FILE...]
-i:忽略大小写
--color:匹配到的字符带颜色
-v::显示没有被模式匹配到的行
-o:只显示被模式匹配到的字符串
通配符:
1. *: 任意长度的任意字符
2. ?: 任意单个字符
3. []:
4. [^]:
正则表达式:REGular EXPression, REGEXP
元字符:
1. .: 匹配任意单个字符
2. []: 匹配指定范围内的任意单个字符
3. [^]:匹配指定范围外的任意单个字符
字符集合:[:digit:], [:lower:], [:upper:], [:punct:], [:space:], [:alpha:], [:alnum:]
匹配次数(贪婪模式):
1. *: 匹配其前面的字符任意次
e.g: 有:a, b, ab, aab, acb, adb, amnb,下面pattern会匹配那些字符串?
a*b: b, ab,aab
a?b: b, ab
a.*b: ab, aab, acb, adb, amnb
.*: 任意长度的任意字符
2. \?: 匹配其前面的字符1次或0次
3. \{m,n\}:匹配其前面的字符至少m次,至多n次
\{1,\} - 至少1次
\{0,3\} - 至多3次
位置锚定:
1. ^: 锚定行首,此字符后面的任意内容必须出现在行首
2. $: 锚定行尾,此字符前面的任意内容必须出现在行尾
^$: 空白行
3. \<或\b: 锚定词首,其后面的任意字符必须作为单词首部出现
4. \>或\b: 锚定词尾,其前面的任意字符必须作为单词的尾部出现
分组:
ab *:ab作为整体,出现n次
后向引用
\1: 引用第一个左括号以及与之对应的右括号所包括的所有内容
\2:
\3:
e.g:
He love his lover.
She like her liker.
He like his lover.
grep ' l..e .*\1' test.txt 匹配到1, 2行
练习:
1、显示/proc/meminfo文件中以不区分大小的s开头的行;
grep -i '^s' /proc/meminfo
grep '^[sS]' /proc/meminfo
2、显示/etc/passwd中以nologin结尾的行;
grep 'nologin$' /etc/passwd
取出默认shell为/sbin/nologin的用户列表
grep "nologin$' /etc/passwd | cut -d: -f1
取出默认shell为bash,且其用户ID号最小的用户的用户名
grep 'bash$' /etc/passwd | sort -n -t: -k3 | head -1 | cut -d: -f1
3、显示/etc/inittab中以#开头,且后面跟一个或多个空白字符,而后又跟了任意非空白字符的行;
grep "^#[[:space:]]\{1,\}[^[:space:]]" /etc/inittab
4、显示/etc/inittab中包含了:一个数字:(即两个冒号中间一个数字)的行;
grep ':[0-9]:' /etc/inittab
5、显示/boot/grub/grub.conf文件中以一个或多个空白字符开头的行;
grep '^[[:space:]]\{1,\}' /boot/grub/grub.conf
6、显示/etc/inittab文件中以一个数字开头并以一个与开头数字相同的数字结尾的行;
grep '^ [0−9] .*\1$' /etc/inittab
练习:
1、找出某文件中的,1位数,或2位数;
grep '[0-9]\{1,2\}' /proc/cpuinfo
grep --color '\<[0-9]\{1,2\}\>' /proc/cpuinfo
2、找出ifconfig命令结果中的1-255之间的整数;
需要使用扩展正则表达式
ifconfig | egrep --color '\<([1-9]|[1-9][0-9]|1[0-9][0-9]|2[0-9][0-9])\>'
3、查找当前系统上名字为student(必须出现在行首)的用户的帐号的相关信息, 文件为/etc/passwd
grep '^student\>' /etc/passwd | cut -d: -f3
id -u student
student1
student2
练习:
分析/etc/inittab文件中如下文本中前两行的特征(每一行中出现在数字必须相同),请写出可以精确找到类似两行的模式:
l1:1:wait:/etc/rc.d/rc 1
l3:3:wait:/etc/rc.d/rc 3
grep '^l [0−9] :\1.*\1$' /etc/inittab
05_01_egrep及扩展正则表达式
复习:
REGEXP:REGular EXPression
Pattern:模式
正则表达式:
Basic REGEXP:基本
Extended REGEXP:扩展
基本正则表达式:
.:
[]:
[^]:
次数匹配:
*:
\?: 0或1次
\{m,n\}:至少m次,至多n次;
.*:
锚定:
^:
$:
\<, \b:
\>, \b:
\1, \2, \3, ...
grep:使用基本正则表达式定义的模式来过滤文本的命令;
-i
-v
-o
--color
-E: 使用扩展正则表达式
-A n: 显示匹配到的行和其后的n行
-B n: 前的n行
-C n: 前后各n行
扩展正则表达式:省略很多反斜线
字符匹配:
.
[]
[^]
次数匹配:
*:
?:
+: 匹配其前面的字符至少1次,\{1,\}
{m,n}:
位置锚定:
^
$
\<
\>
分组:
():分组
\1, \2, \3, ...
或者
|: or
C|cat: C或cat, 不是Cat或cat,这个用 '(C|c)at'
grep -E = egrep
4、显示所有以数字结尾且文件名中不包含空白的文件;
bash特性详解时的未解问题
ls .*[^[[:space:]].*[0-9]$
找出/boot/grub/grub.conf文件中1-255之间的数字;
\<([1-9]|[1-9][0-9]|1[0-9][0-9]|2[0-4][0-9]|25[0-5])\>
找出ifconfig中的IP地址
ifconfig | egrep '\<([0-9]|[1-9][0-9]|1[0-9][0-9]|2[0-4][0-9]|25[0-5])\>\.\<([0-9]|[1-9][0-9]|1[0-9][0-9]|2[0-4][0-9]|25[0-5])\>\.\<([0-9]|[1-9][0-9]|1[0-9][0-9]|2[0-4][0-9]|25[0-5])\>\.\<([0-9]|[1-9][0-9]|1[0-9][0-9]|2[0-4][0-9]|25[0-5])\>'
ifconfig | egrep --color '(\<([0-9]|[1-9][0-9]|1[0-9][0-9]|2[0-4][0-9]|25[0-5])\>\.){3}\<([0-9]|[1-9][0-9]|1[0-9][0-9]|2[0-4][0-9]|25[0-5])\>'
找出ifconfig中的ABC 3类IP地址
IPv4:
5类:A B C D E
A:1-127
B:128-191
C:192-223
\<([1-9]|[1-9][0-9]|1[0-9]{2}|2[01][0-9]|22[0-3])\>(\.\<([0-9]|[1-9][0-9]|1[0-9][0-9]|2[0-4][0-9]|25[0-4])\>){2}\.\<([1-9]|[1-9][0-9]|1[0-9][0-9]|2[0-4][0-9]|25[0-4])\>
马哥51cto博客: http://mageedu.blog.51cto.com/
fgrep: 快速grep, 不支持正则表达式