Linux之shell脚本(1)

一、 正则表达式：

 

正则表达式（或称Regular Expression，简称RE）就是由普通字符（例如字符 a 到 z）以及特殊字符（称为元字符）组成的文字模式。

 

该模式描述在查找文字主体时待匹配的一个或多个字符串。

 

正则表达式作为一个模板，将某个字符模式与所搜索的字符串进行匹配。简单的说，正则表示式就是处理字符串的方法，它是以行为单位来进行字符串的处理行为， 正则表示式通过一些特殊符号的辅助，可以让使用者轻易的达到搜寻/删除/取代某特定字符串的处理程序。vim、grep、find、awk、sed等命令都支持正则表达式。

1.常用正则表达式：

1)  . 代表任意单个字符;

例如：检索test.txt文本中匹配s字符的。

wKioL1lPy0XDyVGQAAAScemUMuI706.png

2) ^ 代表行的开始；

wKiom1lPy0awtoMMAAAROCNbamg994.png

3) $ 代表行的结束；

例如；检索test.txt文本中以.结束的。（\.表示把特殊字符.转为普通字符）

wKioL1lPy0aiqO7HAAAUiTrLc1M140.png

4）[...]表示匹配括号中的字符之一

例如：检索test.txt文本中匹配小写字母a到z之间的。

wKiom1lPy0fTdQIpAAAl7fcDxvM207.png

注意：

[abc]表示匹配单个字符a或b或c

[123]表示匹配单个字符1或2或3

[A-Z]表示匹配大写字母A-Z之间一个

[^a]表示取反，匹配除去小写字母a的。

5）* 表示前导字符出现0次或任意多次；

例如：检索test.txt文本中出现0次或多次T的。

wKioL1lPy0fgxiiKAAATURZXFLo690.png

6) \? 表示前导字符出现0或1次；

例如：检索test.txt文本中出现0或1次e的。

wKiom1lPy0jRU9UvAAAdoEPisMk473.png

7）\+  表示前导字符出现1次或多次。

例如:检索test.txt文本中出现1或多次nn的。

wKioL1lPy0iQzOOlAAAS2fyJHnQ634.png

8）\{n,m\} 表示前导字符出现n至m次；

n/m为整数，并且m>n；

其他形式：

\{n\}连续的n个前导字符；

\{n,\}连续的至少n个前导字符；

例如：检索test.txt文本中出现2至4个n的。

wKiom1lPy0jwonOKAAATstw7eUg610.png

9） \ 表示转义其后的单个特殊字符，使其成为普通字符；

例如：检索test.txt文本中含有.的。

wKioL1lPy0iz3bJuAAAbNenzcVc430.png

10） | 表示或；

例如：检索test.txt文本中含有a或b的。

wKiom1lPy0nij2CFAAAi6FS8y2A442.png

11） []  或 （）：将部分内容合成一个单位组；

例如：检索test.txt文件中含有Tae或The的。

wKioL1lPy0nQeRayAAATFidJLpE365.png

二、grep命令的用法

grep （global search regular expression(RE) and print out the line,全面搜索正则表达式并把行打印出来）是一种强大的文本搜索工具，它能使用正则表达式搜索文本，并把匹配的行打印出来.

1）-A 数字：列出符合行之外，并且列出后几行；

例如：列出test.txt文本中Tom行与后俩行。

wKioL1lPy0njoRw7AAATRUpep3g621.png

2）-B 数字：列出符合行之外，并且列出前几行；

例如：列出test.txt文本中Tom行与前俩行。

wKiom1lPy0ryAMk_AAAUOw-bSOI277.png

3）-C 数字（如不加数字，默认为2）：列出符合行之外，并且列出前后几行；

例如：列出test.txt文本中Tom行与前后俩行。

wKioL1lPy0rzNBbjAAAWSg8ixns087.png

4）-c ： --count（若再加上-v参数则显示不符合的总行数）：不显示符合的行，只显示符合的总行数；

例如：列出test.txt文本中含有Tom的行数；

列出test.txt文本中不含有Tom的行数。

wKiom1lPy0rRnLacAAAQ5SYjLhQ039.png

5）-i ：忽略大小写

例如：列出test.txt文本中含有tom（大小写）的行。

wKioL1lPy0uRsRKhAAAS_IJ8RKI962.png

6）-n ：再匹配的行前面打印行号

例如：列出test.txt文本中含有tom（大小写）的行，并且打印出行号。

wKiom1lPy0vxcUynAAAiwT9OK24524.png

7）-v ：反检索，显示不匹配的行；

例如：列出test.txt文本中不含有tom的行。

wKioL1lPy0vCmw7TAAAm2rwUnLU505.png

8）精确匹配：再抽取的字符串后加上  \>

例如：精确列出test.txt文本中含有30的行。

wKiom1lPy0vBDXXuAAAS2Y6ERIU611.png

8）-s :不显示不存在或不匹配文本的错误信息；（如文件不存在）

例如：bb.txt文件不存在，检索时候提示搜索不到的错误信息，

如果不要错误信息提示，则加上-s。

wKiom1lPy0zwOArjAAARjxCH4js530.png

三、sed命令的用法

sed是一种在线编辑器，它一次处理一行内容。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有改变，除非你使用重定向存储输出。

sed的基本命令：

1）s ：替换

例如：把test.txt中The替换成aa，输出到bb.txt文件中。

sed 替换命令:

/../../分隔符（可以用其他符合代替）

The 搜索的字符串

aa  替换的字符串

<test.txt>  搜索的文件  

bb.txt   输出到的文件

wKioL1lPy0yhBhP4AAAicOX16p4042.png

2) & ：表示匹配的字符串

注意：

sed 默认只替换搜索字符串的第一次出现 , 利用 /g 可以替换搜索字符串所有

如果需要对同一文件或行作多次修改，可以使用 "-e" 选项

例如：给test.txt中The替换成加一个（），输出到cc.txt文件中。

wKioL1lPy0zQ5bqWAAAZqqmeVL8215.png

3) d :删除行

例如：将passwd内容显示并打印行号，同时删除2到5行。

注意：

nl命令在linux系统中用来计算文件中行号。nl 可以将输出的文件内容自动的加上行号。

wKiom1lPy03RKZ5uAAAWh7Pav_4676.png

4）增加行：a（在指定的行后新增）i（在指定的行前新增）

例如：将test.txt内容显示并打印行号，同时在第二行后新增hello。

wKioL1lPy02zkfyzAAAV3fEI-Ks185.png

例如：将test.txt内容显示并打印行号，同时在第二行前新增hello。

wKiom1lPy03gVSJGAAAbAV6rx88350.png

例如：如果要同时新增多行，则每行之间要用反斜杠\来进行的添加。

wKiom1lPy03BM0NkAAAbFqm-AsE990.png

5）c ：取代行

例如：将test.txt内容显示并打印行号，同时取代2到5行间内容为BBBBBBB。

wKioL1lPy07TSqQkAAAT2eYIgT8890.png

6）p : 打印

例如：仅列出test.txt文本中的第5到7行内容。

wKioL1lPy07iJNRKAAAWGshTin0387.png

7）-i：sed 的-i选项可以直接修改文件中的内容

例如：将test.tst文本中的第二行修改为kkkk

wKiom1lPy07DckJEAAAVSBrp-7w357.png

8）扩展

调用sed的方式：

在命令行键入命令

将sed命令插入脚本文件，然后调用sed

将sed命令插入脚本文件，并使sed脚本可执行。

使用sed命令行的格式：

sed [选项] sed命令 输入文件。

记住在命令行使用sed命令时，实际命令要加单引号。

sed也允许加双引号。

使用sed脚本文件格式:

sed [选项] -f sed脚本文件  输入文件

要使用第一行具有sed命令解释器的sed脚本文件的格式：

sed脚本文件 [选项]  输入文件

例如：使用sed脚本将jjjjj添加到test.txt文本中的第三行，将lllll添加到test.txt文本中的第四行。

wKiom1lPy0-ztkqAAAAvZgtB4ys078.png

给sed脚本权限，运行脚本

wKioL1lPy0_hlq8QAAASi5RSzdE453.png