目录
2.2常见元字符(支持的工具:find、grep、egrep、sed和awk)
一、常见的管道命令
1.1sort命令
-
sort命令可针对文本文件的内容,以行为单位来排序。
-
格式:sort [选项] 参数
常用选项
eg:
1.2uniq命令
-
uniq 命令用于检查及删除文本文件中重复出现的行列,一般与 sort 命令结合使用
-
格式:uniq [选项] 参数
常用选项:
1.3 tr命令
-
常用来对来自标准输入的字符进行替换、压缩和删除。
-
格式:tr [选项] [参数]
1.4cut命令
-
显示行中的指定部分,删除文件中指定字段
-
格式:cut [选项] 参数
常用选项:
1.5eval命令
作用:命令字前加上eval时, shell会在执行命令之前扫描它两次。eval命令将首先会先扫描命令行进行所有的置换,然后再执行该命令。该命令适用于那些一次扫描无法实现其功能的变量。该命令对变量进行两次扫描。
1.6实例
1.6.1统计当前主机连接状态
1.6.2统计当前链接的主机数
[root@xiin opt]#ss -ant|tr -s " "|cut -d" " -f5|cut -d":" -f1|sort|uniq -c|tail -n +3
二、正则表达式
2.1正则表达式的定义
-
正则表达式,又称正规表达式、常规表达式
-
使用字符串来描述、匹配一系列符合某个规则的字符串
-
正则表达式组成
-
普通字符包括大小写字母、数字、标点符号及一些其他符号。
-
元字符是指在正则表达式中具有特殊意义的专用字符
-
2.2常见元字符(支持的工具:find、grep、egrep、sed和awk)
eg1:. 表示任意一个字符
#表示任意一个字符
[root@localhost shell]#echo abc|grep "a.c"
abc
#原来的点需要加\转义
[root@localhost shell]#echo abc|grep "a\.c"
#标准格式需要加'' 或者""
[root@localhost shell]#echo abc a.c|grep "a\.c"
abc a.c
[root@localhost shell]#echo abc adc|grep "a.c"
abc adc
示例2:[ ] 匹配括号中的一个字符
#[yxp]
[root@yxp opt]#ls |grep "[yxp].txt"
p.txt
x.txt
y.txt
yxp.txt
#[0-9]
[root@yxp opt]#ls |grep "[0-9].txt"
0.txt
1.txt
2.txt
3.txt
4.txt
5.txt
6.txt
7.txt
8.txt
9.txt
#{a..d}
[root@yxp aa]#touch {a..z}.txt
[root@yxp aa]#ls
a.txt e.txt i.txt m.txt q.txt u.txt y.txt
b.txt f.txt j.txt n.txt r.txt v.txt z.txt
c.txt g.txt k.txt o.txt s.txt w.txt
d.txt h.txt l.txt p.txt t.txt x.txt
#{A..Z}
[root@yxp bb]#touch {A..Z}.txt
[root@yxp bb]#ls
A.txt E.txt I.txt M.txt Q.txt U.txt Y.txt
B.txt F.txt J.txt N.txt R.txt V.txt Z.txt
C.txt G.txt K.txt O.txt S.txt W.txt
D.txt H.txt L.txt P.txt T.txt X.txt
#[a-d]:包括小a到小d,还有大写的,除了D
[root@yxp opt]#ls [a-d].txt
a.txt A.txt b.txt B.txt c.txt C.txt d.txt
##只想匹配小写(需要结合grep)
[root@yxp opt]#ls |grep '[a-d].txt'
a.txt
b.txt
c.txt
d.txt
#[A-D]:不包括小a
[root@yxp opt]#ls [A-D].txt
A.txt b.txt B.txt c.txt C.txt d.txt D.txt
##[A-D]只想匹配大写
[root@yxp opt]#ls |grep '[A-D].txt'
A.txt
B.txt
C.txt
D.txt
示例3:[^ ]:表示否定括号中出现字符类中的字符,取反
[root@yxp opt]#ls |grep "[^yxp].txt"
0.txt
1.txt
2.txt
3.txt
4.txt
5.txt
6.txt
7.txt
8.txt
9.txt
a.txt
.........后面省略
[root@yxp opt]#echo 12txt|grep "[^az].txt"
12txt
示例4:[:alnum:]匹配任意字母和数字
##注意:一定要在外面再套一个[ ]
[root@yxp opt]#ls |grep '[[:alnum:]].txt'
0.txt
1.txt
2.txt
3.txt
4.txt
5.txt
6.txt
示例5:元字符:(.)
#//表示rc. rc0 ... rc6
[root@yxp opt]#ls /etc/ |grep 'rc[.0-6]'
rc0.d
rc1.d
rc2.d
rc3.d
rc4.d
rc5.d
rc6.d
rc.d
rc.local
#r..t ..表示任意两个字符
[root@yxp opt]#grep "r..t" /etc/passwd
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
2.3扩展正则表达式
-
支持的工具:egrep、awk 或 grep -E 和 sed -r
示例1:*匹配前面子表达式0次或者多次
[root@yxp opt]#echo google ggle|grep "go*gle"
google ggle
[root@yxp opt]#echo google ggle gggle|grep "go*gle"
google ggle gggle
示例2:{n,m}匹配前面的子表达式n到m次
[root@yxp opt]#echo goooogle goole gggle|egrep "go{3,5}gle"
goooogle goole gggle
示例3:{n,} 匹配前面的子表达式不少于n次 >=n
[root@yxp opt]#echo goooogle gooogle gggle|egrep "go{3,}gle"
goooogle gooogle gggle
示例4:{,n} 匹配前面的子表达式最多n次,<=n
[root@yxp opt]#echo goooogle gooogle gggle|egrep "go{,3}gle"
goooogle gooogle gggle
示例5:* 匹配前面子表达式0次或者多次
[root@yxp opt]#echo gggggggggggdadasgle|grep 'g*gle'
gggggggggggdadasgle
示例6:.*任意长度的任意字符
[root@yxp opt]#echo gggggggggggdadasgle|grep '.*gle'
gggggggggggdadasgle
示例7:?匹配前面子表达式0次或者1次,即:可有可无
[root@yxp opt]#echo goole gogle ggle|egrep "go?gle"
goole gogle ggle
示例8:+与星号相似,表示其前面字符出现一次或多次,但必须出现一次,>=1
[root@yxp opt]#echo google gogle ggle gooogle|egrep "go+gle"
google gogle ggle gooogle
示例9:| 逻辑OR(或)方式指定正则表达式要是用的模式
[root@yxp opt]#echo 1ee 1abc 2abc|egrep "1|2abc"
1ee 1abc 2abc
示例10:() 字符串分组,将括号中的字符串作为一个整体。
[root@yxp opt]#echo 1ee 1abc 2abc|egrep "(1|2)abc"
1ee 1abc 2abc
示例11:提取ip地址
#法一
[root@yxp opt]#ifconfig ens33|grep "netmask"|grep -o -E "[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}"|head -1
192.168.130.10
#法二:使用了分组
[root@yxp opt]#ifconfig ens33|grep "netmask"|egrep -o '([0-9]{1,3}.){3}[0-9]{1,3}'|head -1
192.168.130.10
2.4位置锚定
示例1:行尾锚定,用于模式的最右侧
[root@localhost ~]#
[root@localhost ~]# grep "bash$" /etc/passwd
root:x:0:0:root:/root:/bin/bash
xiin:x:1000:1000:xiin:/home/xiin:/bin/bash
zhangsan:x:1001:1001::/home/zhangsan:/bin/bash
lili:x:1002:1002::/home/lili:/bin/bash
示例2:行首锚定,用于模式的最左侧
[root@localhost ~]# grep "^root" /etc/passwd
root:x:0:0:root:/root:/bin/bash
示例3:用于模式匹配整行,匹配的内容单独在一行
[root@localhost ~]#echo root|grep "^root$"
root
示例4:\< :只匹配右侧的单词
[root@localhost ~]# echo hello-123|grep "\<123"
hello-123
示例5:\>:只匹配左侧的单词
[root@localhost ~]# echo hello-123 222|grep "hello\>"
hello-123 222
示例6:过滤出不是以#开头的非空行
[root@localhost ~]# grep "^[^#]" /etc/fstab
/dev/mapper/centos-root / xfs defaults 0 0
UUID=48da5a46-43fc-4794-bd52-e7315a6721bd /boot xfs defaults 0 0
/dev/mapper/centos-swap swap swap defaults 0 0
[root@localhost ~]#