shell 字符串处理

引用自：shell 字符串处理

shell 字符串处理

在做shell批处理程序时候，经常会涉及到字符串相关操作。有很多命令语句，如：awk,sed都可以做字符串各种操作。 其实shell内置一系列操作符号，可以达到类似效果，大家知道，使用内部操作符会省略启动外部程序等时间，因此速度会非常的快。

一、判断读取字符串值**

1. 表达式 含义

${var}                                                   变量var的值, 与$var相同
${var-DEFAULT}                                  如果var没有被声明, 那么就以$DEFAULT作为其值 *
${var:-DEFAULT}                                 如果var没有被声明, 或者其值为空, 那么就以$DEFAULT作为其值 *
${var=DEFAULT}                                 如果var没有被声明, 那么就以$DEFAULT作为其值 *
${var:=DEFAULT}                                如果var没有被声明, 或者其值为空, 那么就以$DEFAULT作为其值 *
${var+OTHER}                                    如果var声明了, 那么其值就是$OTHER, 否则就为null字符串
${var:+OTHER}                                   如果var被设置了, 那么其值就是$OTHER, 否则就为null字符串
${var?ERR_MSG}                               如果var没被声明, 那么就打印$ERR_MSG *
${var:?ERR_MSG}                              如果var没被设置, 那么就打印$ERR_MSG *
${!varprefix*}                                        匹配之前所有以varprefix开头进行声明的变量
${!varprefix@}                                      匹配之前所有以varprefix开头进行声明的变量
加入了“*”  不是意思是： 当然, 如果变量var已经被设置的话, 那么其值就是$var.

二、字符串操作（长度，读取，替换 )

2. 表达式 含义

${#string}                                      $string的长度 
${string:position}                              在$string中, 从位置$position开始提取子串
${string:position:length}                       在$string中, 从位置$position开始提取长度为$length的子串     
${string#substring}                             从变量$string的开头, 删除最短匹配$substring的子串
${string##substring}                            从变量$string的开头, 删除最长匹配$substring的子串
${string%substring}                             从变量$string的结尾, 删除最短匹配$substring的子串
${string%%substring}                            从变量$string的结尾, 删除最长匹配$substring的子串   
${string/substring/replacement}                 使用$replacement, 来代替第一个匹配的$substring
${string//substring/replacement}                使用$replacement, 代替所有匹配的$substring
${string/#substring/replacement}                如果$string的前缀匹配$substring, 那么就用$replacement来代替匹配到的$substring
${string/%substring/replacement}                如果$string的后缀匹配$substring, 那么就用$replacement来代替匹配到的$substring
说明："* $substring”可以是一个正则表达式。

三、栗子

1.shell中截取字符串的方法有很多中，${expression}一共有9种使用方法。
${parameter:-word}
${parameter:=word}
${parameter:?word}
${parameter:+word}
上面4种可以用来进行缺省值的替换。
${#parameter}
上面这种可以获得字符串的长度。
${parameter%word} 最小限度从后面截取word
${parameter%%word} 最大限度从后面截取word
${parameter#word} 最小限度从前面截取word
${parameter##word} 最大限度从前面截取word
上面4个就是用来截取字符串的方法了。
有了着四种用法就不必使用cut命令来截取字符串了

第一种又可以分为四种情况，下面一一介绍。
1、使用 # 号操作符。用途是从左边开始删除第一次出现子字符串即其左边字符，保留右边字符。用法为#*substr,例如：
str='http://www.你的域名.com/cut-string.html'
echo ${str#*//}
得到的结果为www.你的域名.com/cut-string.html，即删除从左边开始到第一个"//"及其左边所有字符2、使用 ## 号操作符。用途是从左边开始删除最后一次出现子字符串即其左边字符，保留右边字符。用法为##*substr,例如：
str='http://www.你的域名.com/cut-string.html'
echo ${str##*/}
得到的结果为cut-string.html，即删除最后出现的"/"及其左边所有字符
3、使用 % 号操作符。用途是从右边开始删除第一次出现子字符串即其右边字符，保留左边字符。用法为%substr*,例如：
str='http://www.你的域名.com/cut-string.html'
echo ${str%/*}
得到的结果为http://www.你的域名.com，即删除从右边开始到第一个"/"及其右边所有字符
4、使用 %% 号操作符。用途是从右边开始删除最后一次出现子字符串即其右边字符，保留左边字符。用法为%%substr*,例如：
str='http://www.你的域名.com/cut-string.html'
echo ${str%%/*}
得到的结果为http://www.你的域名.com，即删除从右边开始到最后一个"/"及其右边所有字符

第二种也分为四种，分别介绍如下：
1、从左边第几个字符开始以及字符的个数，用法为:start:len,例如：
str=‘http://www.你的域名.com/cut-string.html’
echo ${var:0:5}
其中的 0 表示左边第一个字符开始，5 表示字符的总个数。
结果是：http:
2、从左边第几个字符开始一直到结束，用法为:start,例如：
str=‘http://www.你的域名.com/cut-string.html’
echo ${var:7}
其中的 7 表示左边第8个字符开始
结果是：www.你的域名.com/cut-string.html
3、从右边第几个字符开始以及字符的个数，用法:0-start:len,例如：
str=‘http://www.你的域名.com/cut-string.html’
echo ${str:0-15:10}
其中的 0-6 表示右边算起第6个字符开始，10 表示字符的个数。
结果是：cut-string
3、从右边第几个字符开始一直到结束，用法:0-start,例如：
str=‘http://www.你的域名.com/cut-string.html’
echo ${str:0-4}
其中的 0-6 表示右边算起第6个字符开始，10 表示字符的个数。
结果是：html
注：（左边的第一个字符是用 0 表示，右边的第一个字符用 0-1 表示）

2.长度

[web97@salewell97 ~]$ test='I love china'
[web97@salewell97 ~]$ echo ${#test}
12

${#变量名}得到字符串长度

3.截取字串

[chengmo@localhost ~]$ test='I love china'
[chengmo@localhost ~]$ echo ${test:5}     
e china
[chengmo@localhost ~]$ echo ${test:5:10} 
e china

${变量名:起始:长度}得到子字符串

4.字符串删除

[chengmo@localhost ~]$ test='c:/windows/boot.ini'
[chengmo@localhost ~]$ echo ${test#/}
c:/windows/boot.ini
[chengmo@localhost ~]$ echo ${test#*/}
windows/boot.ini
[chengmo@localhost ~]$ echo ${test##*/}
boot.ini
[chengmo@localhost ~]$ echo ${test%/*} 
c:/windows
[chengmo@localhost ~]$ echo ${test%%/*}

${变量名#substring正则表达式}从字符串开头开始配备substring,删除匹配上的表达式。

${变量名%substring正则表达式}从字符串结尾开始配备substring,删除匹配上的表达式。

注意：${test##/},${test%/} 分别是得到文件名，或者目录地址最简单方法。

5.字符串替换

[chengmo@localhost ~]$ test='c:/windows/boot.ini'
[chengmo@localhost ~]$ echo ${test/\//\\}
c:\windows/boot.ini
[chengmo@localhost ~]$ echo ${test//\//\\}
c:\windows\boot.ini
linux环境下去除路径后面的/符号方法，如果路径作为参数传入shell脚本时，常用此方法进行处理
[root@open ~]# DIR="/export/server/logs/"
[root@open ~]# LOG_DIR=${DIR/%\//}
[root@open ~]# echo $LOG_DIR
/export/server/logs

${变量/查找/替换值} 一个“/”表示替换第一个，”//”表示替换所有,当查找中出现了：”/”请加转义符”/”表示。

四、性能比较

在shell中，通过awk,sed,expr 等都可以实现，字符串上述操作。下面我们进行性能比较。

 [chengmo@localhost ~]$ test='c:/windows/boot.ini'                       
 [chengmo@localhost ~]$ time for i in $(seq 10000);do a=${#test};done;           
 real    0m0.173s
 user    0m0.139s
 sys     0m0.004s
 [chengmo@localhost ~]$ time for i in $(seq 10000);do a=$(expr length $test);done;      
 real    0m9.734s
 user    0m1.628s

速度相差上百倍，调用外部命令处理，与内置操作符性能相差非常大。在shell编程中，尽量用内置操作符或者函数完成。使用awk,sed类似会出现这样结果。