Shell正则表达

一、正则表达式的概念及特点：

　　正则表达式是对字符串操作的一种逻辑公式，就是用事先定义好的一些特定字符、及这些特定字符的组合，组成一个“规则字符串”，
这个“规则字符串”用来表达对字符串的一种过滤逻辑。规定一些特殊语法表示字符类、数量限定符和位置关系,然后用这些特殊语法和普
通字符一起表示一个模式,这就是正则表达式(Regular Expression)。

给定一个正则表达式和另一个字符串，我们可以达到如下的目的：

　　1. 给定的字符串是否符合正则表达式的过滤逻辑（称作“匹配”）；

　　2. 可以通过正则表达式，从字符串中获取我们想要的特定部分。

正则表达式的特点：

　　1. 灵活性、逻辑性和功能性非常的强；

　　2. 可以迅速地用极简单的方式达到字符串的复杂控制。

　　3. 对于刚接触的人来说，比较晦涩难懂。

　　由于正则表达式主要应用对象是文本，因此它在各种文本编辑器场合都有应用，小到著名编辑器EditPlus，大到
Microsoft Word、Visual Studio等大型编辑器，都可以使用正则表达式来处理文本内容。

二、正则表达式有三部分组成：

1、字符类

<

字符类
字符	含义	举例
.	匹配任意一个字符	abc. 可以匹配abcd、abce等字符串
[]	匹配括号中任意给一个字符 类似于sql的 in	[abc]d 可以匹配ad , bd , cd
-	用在[]中，表示字符范围	[a-zA-Z]匹配26个字母，包括大写和小写
[^xx]	^用在[]内，表示取反，即匹配 不包含在[]内的字符	[^ab]匹配a、b之外的任意一个字符
[[:xxx:]]	grep工具预定义的一些命名字符	[[:digit:]]匹配一个数字 [[:alpha:]]匹配一个汉字

2、数量限定符

数量限定符(Quantifier): 邮件地址的每一部分可以有一个或多个x字符,IP地址的每一部 分可以有1-3个y字符

<

数量限定符
字符	含义	举例
？	紧跟在？前面的单元匹配零次或一次	2[0-9]?  匹配2和20...29之间的数字
+	紧跟在+前面的单元至少匹配一次	[0-9]+  匹配所有的数字
*	紧跟在*前面的单元匹配零次或多次	[0-9][0-9]*  匹配至少一位数字
{N}	紧跟在其前面的单元精确匹配N次	123{3}  匹配12333
{N,}	紧跟在其前面的单元至少匹配N次	123{3,} 匹配12333、123333····
{,M}	紧跟在其前面的单元最多匹配M次	123{,3} 匹配12333、1233、123、12
{N,M}	紧跟在其前面的单元至少匹配N次， 最多匹配M次	123{2,3} 匹配12333、1233

注：

(?:pattern) 匹配pattern 但不获取匹配结果，也就是说这是一个非获取匹配，不进行存储供以后使用。
 
(?=pattern) 正向预查，在任何匹配 pattern 的字符串开始处匹配查找字符串。这是一个非获取匹配，也就是说，该匹配不需要获取供以后使用。
 
(?!pattern) 负向预查，与(?=pattern)作用相反

3、位置限定符

位置限定符(Anchor)：描述各种字符类以及普通字符之间的位置关系，例如邮件地址分三部分,用普通字符@和.隔 开,IP地址分四部分,用.隔开,每一部分都可以用

字符类和数量限定符 描述。为了表示位置关系,需要位置限定符的概念,将在下面介绍。

<

位置限定符
字符	含义	举例
^	匹配行首位置	^abc 匹配行首为abc的行
$	匹配行末位置	;$ 匹配行末为 ; 的行，^$匹配空行
\<	匹配单词开头的位置	\<th 匹配 this，但不匹配tenth等
\>	匹配单词词尾的位置	P\> 匹配 leap，但不匹配peal
\b	XX\b 匹配以 XX 开头的单词
	\bXX 匹配以 XX 结尾的单词
	\bXX\b 匹配XX	\bat\b 匹配at
\B	用法与\b相同，功能与\b相反 不匹配XX开头或结尾的单词	\Bat\B 匹配不以at开头或结尾的单词 如：匹配 battery，不匹配hat、at

4、特殊字符

\cx 匹配由x指明的控制字符。
 
\d 匹配一个数字字符。等价于 [0-9]。
 
\D 匹配一个非数字字符。等价于 [^0-9]。
 
\f 匹配一个换页符。等价于 \x0c 和 \cL。
 
\n 匹配一个换行符。等价于 \x0a 和 \cJ。
 
\r 匹配一个回车符。等价于 \x0d 和 \cM。
 
\s 匹配任何空白字符，包括空格、制表符、换页符等等。等价于[ \f\n\r\t\v]。
 
\S 匹配任何非空白字符。等价于 [^ \f\n\r\t\v]。
 
\t 匹配一个制表符。等价于 \x09 和 \cI。
 
\v 匹配一个垂直制表符。等价于 \x0b 和 \cK。
 
\w 匹配包括下划线的任何单词字符。等价于'[A-Za-z0-9_]'。
 
\W 匹配任何非单词字符。等价于 '[^A-Za-z0-9_]'。 
 
\xn 匹配 n，其中 n 为十六进制转义值。十六进制转义值必须为确定的两个数字长。
 
\num 匹配 num，其中num是一个正整数。对所获取的匹配的引用。
 
\n 标识一个八进制转义值或一个后向引用。如果 \n 之前至少 n 个获取的子表达式，则 n 为后向引用。否则，如果 n 为八进制数字 (0-7)，则 n 为一个八进制转义值。
 
\nm 标识一个八进制转义值或一个后向引用。如果 \nm 之前至少有is preceded by at least nm 个获取得子表达式，则 nm 为后向引用。如果 \nm 之前至少有 n 个获取，则 n 为一个后跟文字 m 的后向引用。如果前面的条件都不满足，若 n 和 m 均为八进制数字 (0-7)，则 \nm 将匹配八进制转义值 nm。 
 
\nml 如果 n 为八进制数字 (0-3)，且 m 和 l 均为八进制数字 (0-7)，则匹配八进制转义值 nml。
 
\un 匹配 n，其中 n 是一个用四个十六进制数字表示的Unicode字符。

5、正则表达式优先级

优先级： 高至低

     [....] [: :]       方括号符号

     [ ]        方括号表达式

     \( \) \digit     子表达式或反向应用

     * \ & \ }        前置单个字符发现的正则表达式

     无符号        连续

     ^$                锚点

三、shell常用正则表达式：

 “^\d+$” //非负整数（正整数 + 0） 
“^[0-9]*[1-9][0-9]*$” //正整数 
“^((-\d+)|(0+))$” //非正整数（负整数 + 0） 
“^-[0-9]*[1-9][0-9]*$” //负整数 
“^-?\d+$” //整数 
“^\d+(\.\d+)?$” //非负浮点数（正浮点数 + 0） 
“^(([0-9]+\.[0-9]*[1-9][0-9]*)|([0-9]*[1-9][0-9]*\.[0-9]+)|([0-9]*[1-9][0-9]*))$” //正浮点数 
“^((-\d+(\.\d+)?)|(0+(\.0+)?))$” //非正浮点数（负浮点数 + 0） 
“^(-(([0-9]+\.[0-9]*[1-9][0-9]*)|([0-9]*[1-9][0-9]*\.[0-9]+)|([0-9]*[1-9][0-9]*)))$” //负浮点数 
“^(-?\d+)(\.\d+)?$” //浮点数 
“^[A-Za-z]+$” //由26个英文字母组成的字符串 
“^[A-Z]+$” //由26个英文字母的大写组成的字符串 
“^[a-z]+$” //由26个英文字母的小写组成的字符串 
“^[A-Za-z0-9]+$” //由数字和26个英文字母组成的字符串 
“^\w+$” //由数字、26个英文字母或者下划线组成的字符串 
“^[\w-]+(\.[\w-]+)*@[\w-]+(\.[\w-]+)+$” //email地址 
“^[a-zA-z]+://(\w+(-\w+)*)(\.(\w+(-\w+)*))*(\?\S*)?$” //url 
/^(d{2}|d{4})-((0([1-9]{1}))|(1[1|2]))-(([0-2]([1-9]{1}))|(3[0|1]))$/   //  年-月-日 
/^((0([1-9]{1}))|(1[1|2]))/(([0-2]([1-9]{1}))|(3[0|1]))/(d{2}|d{4})$/   // 月/日/年 
“^([w-.]+)@(([[0-9]{1,3}.[0-9]{1,3}.[0-9]{1,3}.)|(([w-]+.)+))([a-zA-Z]{2,4}|[0-9]{1,3})(]?)$”   //Emil 
/^((\+?[0-9]{2,4}\-[0-9]{3,4}\-)|([0-9]{3,4}\-))?([0-9]{7,8})(\-[0-9]+)?$/     //电话号码 
“^(d{1,2}|1dd|2[0-4]d|25[0-5]).(d{1,2}|1dd|2[0-4]d|25[0-5]).(d{1,2}|1dd|2[0-4]d|25[0-5]).(d{1,2}|1dd|2[0-4]d|25[0-5])$”   //IP地址  

匹配中文字符的正则表达式： [\u4e00-\u9fa5] 
匹配双字节字符(包括汉字在内)：[^\x00-\xff] 
匹配空行的正则表达式：\n[\s| ]*\r 
匹配HTML标记的正则表达式：/<(.*)>.*<\/\1>|<(.*) \/>/ 
匹配首尾空格的正则表达式：(^\s*)|(\s*$) 
匹配Email地址的正则表达式：\w+([-+.]\w+)*@\w+([-.]\w+)*\.\w+([-.]\w+)* 
匹配网址URL的正则表达式：^[a-zA-z]+://(\\w+(-\\w+)*)(\\.(\\w+(-\\w+)*))*(\\?\\S*)?$ 
匹配帐号是否合法(字母开头，允许5-16字节，允许字母数字下划线)：^[a-zA-Z][a-zA-Z0-9_]{4,15}$ 
匹配国内电话号码：(\d{3}-|\d{4}-)?(\d{8}|\d{7})? 

匹配腾讯QQ号：^[1-9]*[1-9][0-9]*$

四、正则表达式支持的命令：

正则支持的命令有：

查找相关：grep egrep agrep

编辑器：sed 

字符串处理程序：awk icon perl python ruby tcl 

文件查看程序：more page pg less 

文件编辑程序：vi emacs jed jove vile vim等

grep:文本匹配程序

egrep：使用扩展正则表达式，消耗更多的运算资源

fgrep：快速grep，匹配固定字符串而非正则表达式。

-----------------------------

who |grep -F root

注：-F是grep默认的选项，列出单前root登陆的信息，过程就是把who打印出来的信息交给grep，grep查找root的行。然后再打印出来。

grep 选项 文件

用途：显示一个或多个模式的文本行，通常用于管道|的第一步。具体参数请查找相关资料