shell——正则表达式、grep、sed、awk的使用

目录

一、正则表达式

二、 grep的使用

三、sed流编辑器（一般用与替换文本）

1、sed -i 's/#rm -f \/a\/b/rm -f \/a\/b/g' hello/file

2、 sed -i 's/^bind-address.*/bind-address = 0.0.0.0/' $MYSQL_CONF_FILE

3、 Sed -r ‘s/root/ROOT/gi/’ /etc/passwd  

4、 转义字符

四、awk的使用（用于输出列）

一、正则表达式

.	ls .txt	匹配当前目录下以.txt结尾的文件
*	grep 'a*' file.txt	匹配文件中所有连续出现的字母a
+	grep 'ba+' file.txt	配文件中所有包含b后跟着一个或多个a的字符串。
?	grep 'colou?r' file.txt	匹配文件中包含color或colour的字符串。
[ ]	grep '[aeiou]' file.txt	匹配文件中包含任何一个元音字母的字符串
[^]	’grep '[^0-9]' file.txt	匹配文件中不包含数字的行
-	grep '[a-z]' file.txt	匹配文件中包含小写字母的字符串
\b	grep '\bword\b' file.txt	匹配文件中独立的单词word
^	grep '^start' file.txt	匹配文件中以start开头的行
$	grep 'end$' file.txt	匹配文件中以end结尾的行

二、 grep的使用

cat test.txt |grep ^u	找出test.txt中以u开头的行的内容
cat test.txt |grep ^[^u]	找出test.txt中不以u开头的行的内容
cat /etc/passwd | grep -n root	将/etc/passwd，取出出现 root 的行，(-n)显示行号
ps aux | wc -l	显示进程的个数
grep "wl" 1.txt 2.txt 3.txt	在 1.txt、2.txt、3.txt中查找wl
grep -r "wl" path/inc	在path/inc中递归搜索wl
grep "wl" path/*.txt	path目录下所有的txt，搜索wl

三、sed流编辑器（一般用与替换文本）

1、sed -i 's/#rm -f \/a\/b/rm -f \/a\/b/g' hello/file

-i：直接在原始文件上进行编辑

s表示替换操作的开始

g表示全局替换(如果没有g，则若多行出现且一行有多处出现，则只会替换每一行的第一个)

#rm -f \/a\/b/待替换的模式，是#rm -f /a/b的文本

rm -f \/a\/b/是替换后的模式，是rm -f /a/b的文本

表示将hello/file中的#rm -f /a/b替换成为rm -f /a/b

2、 sed -i 's/^bind-address.*/bind-address = 0.0.0.0/' $MYSQL_CONF_FILE

 ^bind-address.*：匹配以"bind-address"开头的行。

bind-address = 0.0.0.0：替换匹配到的行为"bind-address = 0.0.0.0"。

3、 Sed -r ‘s/root/ROOT/gi/’ /etc/passwd  

在etc/passwd目录下的所有文件（-r），在文本（i）中将所有（g）的root替换（s）成ROOT

4、 转义字符

Sed -r ‘\crootcd’ passwd

Sed -r ‘\#root#d’ passwd（\作转义字符，告诉sed要将#看作是普通字符）

将passwd中的root删掉，两个#可以换成任意的字符

四、awk的使用（用于输出列）

awk '{print $2}' file.txt	打印file.txt中的第二列
awk -F':' '{print $1, $NF}' /etc/passwd	以：为分隔符，打印第一列和最后一列
awk -va=1 '{print $1,$1+a}' log.txt	-va=1，指定变量a，赋值为1，则输出第一列和第二列的内容