Shell编程之正则表达式

目录

一、正则表达式

 1.通配符和正则表达式的区别

 2.基本的正则表达式

2.1 元字符

 2.2 表示匹配次数

 2.3 位置锚定

 2.5 分组  及  或者

 二、扩展正则表达式

---

一、正则表达式

REGEXP： Regular Expressions，由一类特殊字符及文本字符所编写的模式，其中有些字符（元字符）不表示字符字面意义，而表示控制或通配的功能，类似于增强版的通配符功能，但与通配符不同，通配符功能是用来处理文件名，而正则表达式是处理文本内容中字符。

 1.通配符和正则表达式的区别

正则表达式主要用来匹配字符串（命令结果，文本内容）

通配符只用于匹配文件名、目录名等，不能用于匹配文件内容。

 2.基本的正则表达式

2.1 元字符

字符串	说明
.(点)	匹配任意单个字符，可以是一个汉字
(   )	使用转义符，只表示\(\)
[   ]	匹配指定范围内的任意单个字符，示例：[dn]  [0-9]  []  [a-zA-Z]
[ ^ ]	匹配指定范围外的任意单个字符,示例：[^dn] [^a.z]
[:alnum:]	字母和数字 [0-9] [a-z] [0-9] [a-z]
[:alpha:]	代表任何英文大小写字符，亦即 [A-Z], [a-z]
[:lower:]	小写字母,示例:[[:lower:]],相当于[a-z]
[:upper:]	大写字母 [A-Z]
[[:blank:]]	空白字符（空格和制表符）
[:space:]	包括空格、制表符、换行符、回车符等各种类型的空白
[:cntrl:]	不可打印的控制字符（退格、删除、警铃...)
[:digit:]	十进制数字
[:xdigit:]	十六进制数字
[:graph:]	可打印的非空白字符
[:print:]	可打印字符
[:punct:]	标点符号

匹配符3	功能
\w	匹配单词构成部分
\W	匹配非单词构成部分
\s	匹配任何非空白字符
\S	匹配任何空白字符，包括空格、制表符、换页符等等

 2.2 表示匹配次数

匹配符	功能
*	匹配前面的字符任意次，包括0次
.*	任意长度的任意字符,不包括0次
?	匹配其前面的字符出现0次或1次
+	匹配其前面的字符出现最少1次
{n}	匹配前面的字符n次
{m,n}	匹配前面的字符至少m次，至多n次
{,n}	匹配前面的字符至多n次,<=n
{n,}	匹配前面的字符至少n次

举例：
 echo google | grep 'go\{2\}gle'
#代表前面的o出现2次
  google
echo gooooogle |grep 'go\{2,\}gle'  
#代表前面的o出现2次以上
  gooooogle
 echo gooooogle |grep 'go\{2,5\}gle'
#代表前面的o出现2次以上5次以下
   gooooogle
echo goooooogle |grep 'go\{2,5\}gle'
#表示前面的o最少出现2次，最多出现5次，匹配不到
  echo goooooogle |grep 'go\{,5\}gle' 
#匹配前面的字符至多n次

查看ifconfig ens33 IP地址等
ifconfig ens33|grep netmask|grep -o '[0-9]\+\.[0-9]\+\.[0-9]\+\.[0-9]\+'
20.0.0.111
255.255.255.0
20.0.0.255

ifconfig ens33|grep netmask|grep -o '[0-9]\+\.[0-9]\+\.[0-9]\+\.[0-9]\+'|head -n1
# 输出第一行
20.0.0.111

 2.3 位置锚定

符号	说明
^	行首锚定
$	行尾锚定
^$	空行
^ [[:space:]]*$	空白行
\ < 或 \b	词首锚定
\ > 或 \b	词尾锚定
\<root\>	匹配整个单词

cat /etc/fstab | grep -o '\b[a-zA-Z]\+\b' |wc -l   
#统计/etc/fstab 文件中有多少真实单词
44


cat /etc/fstab | grep "^[^#[:space:]]"  | wc -l  
#统计/etc/fstab文件中不是已#号开头的非空行的行数
4

 2.5 分组  及  或者

分组 ：（  ）

或者 ：  \ |

#分组#
( x y) 
将多个字符捆绑在一起，当作一个整体处理，如：\(root\)+

#或者#
 x \| y 
 x或者y

 示例：

echo 1abc 2abc 3abc |grep -o "1\|2abc"
#只匹配了1或者2abc
1  
2abc
echo 1abc 2abc 3abc |grep -o "\(1\|2\)abc"
#1abc或者2abc
1abc
2abc

 二、扩展正则表达式

grep  -E 必须用 sed -r 
或者 
egrep

 表示次数：

符号	说明
*	匹配前面字符任意次
？	0或1次
+	1次或多次
{n}	匹配n次
{m,n}	至少m，至多n次
{,n}	匹配前面的字符至多n次,<=n，n可以为0
{n,}	匹配前面的字符至少n次,<=n，n可以为0

表示分组 及 或者：

符号	说明
（ ）分组	() 将多个字符捆绑在一起，当作一个整体处理，如：(root)
| 或者
a|b	a或b
C|cat	C或cat

示例：提取当前主机的IP地址

ifconfig ens33|grep netmask|grep -Eo '[0-9]\+\.[0-9]\+\.[0-9]\+\.[0-9]\+'|head -n1

#-E表示使用扩展正则表达式 

20.0.0.111 #执行结果 

 练习：

练习：
1.表示手机号
echo "13770725194" | grep -E "1[3456789][0-9]{9}"
# 1：匹配开头数字1
# [3456789]:匹配第二位数字中任意一个数字
# [0-9]  {0-9} ：{9}表示前面的[0-9]（即任意数字）必须恰好出现9次。

2. 表示邮箱
echo "cicifireway@163.com" | grep -E "[a-z]+@[0-9]+\.[a-z]+"
# [a-z]+: [a-z]匹配小写字母 + 可以出现多次
# @ 直接匹配文本中的@字符
# [0-9] 匹配一个或多个数字 + 可以出现多次
# \ . 转义用于匹配除换行符之外的任何单个字符
# [a-z]+ 再次匹配一个或多个小写字母（a到z）