shell 字符串处理

在做shell批处理程序时候,经常会涉及到字符串相关操作。有很多命令语句,如:awk,sed都可以做字符串各种操作。 其实shell内置一系列操作符号,可以达到类似效果,大家知道,使用内部操作符会省略启动外部程序等时间,因此速度会非常的快。

一、判断读取字符串值**

  1. 表达式 含义
${var}                                                   变量var的值, 与$var相同
${var-DEFAULT}                                  如果var没有被声明, 那么就以$DEFAULT作为其值 *
${var:-DEFAULT}                                 如果var没有被声明, 或者其值为空, 那么就以$DEFAULT作为其值 *
${var=DEFAULT}                                 如果var没有被声明, 那么就以$DEFAULT作为其值 *
${var:=DEFAULT}                                如果var没有被声明, 或者其值为空, 那么就以$DEFAULT作为其值 *
${var+OTHER}                                    如果var声明了, 那么其值就是$OTHER, 否则就为null字符串
${var:+OTHER}                                   如果var被设置了, 那么其值就是$OTHER, 否则就为null字符串
${var?ERR_MSG}                               如果var没被声明, 那么就打印$ERR_MSG *
${var:?ERR_MSG}                              如果var没被设置, 那么就打印$ERR_MSG *
${!varprefix*}                                        匹配之前所有以varprefix开头进行声明的变量
${!varprefix@}                                      匹配之前所有以varprefix开头进行声明的变量
加入了“*”  不是意思是: 当然, 如果变量var已经被设置的话, 那么其值就是$var.

二、字符串操作(长度,读取,替换 )

  1. 表达式 含义
${#string}                                      $string的长度 
${string:position}                              在$string中, 从位置$position开始提取子串
${string:position:length}                       在$string中, 从位置$position开始提取长度为$length的子串     
${string#substring}                             从变量$string的开头, 删除最短匹配$substring的子串
${string##substring}                            从变量$string的开头, 删除最长匹配$substring的子串
${string%substring}                             从变量$string的结尾, 删除最短匹配$substring的子串
${string%%substring}                            从变量$string的结尾, 删除最长匹配$substring的子串   
${string/substring/replacement}                 使用$replacement, 来代替第一个匹配的$substring
${string//substring/replacement}                使用$replacement, 代替所有匹配的$substring
${string/#substring/replacement}                如果$string的前缀匹配$substring, 那么就用$replacement来代替匹配到的$substring
${string/%substring/replacement}                如果$string的后缀匹配$substring, 那么就用$replacement来代替匹配到的$substring
说明:"* $substring”可以是一个正则表达式。

三、栗子

1.shell中截取字符串的方法有很多中,${expression}一共有9种使用方法。
${parameter:-word}
${parameter:=word}
${parameter:?word}
${parameter:+word}
上面4种可以用来进行缺省值的替换。
${#parameter}
上面这种可以获得字符串的长度。
${parameter%word} 最小限度从后面截取word
${parameter%%word} 最大限度从后面截取word
${parameter#word} 最小限度从前面截取word
${parameter##word} 最大限度从前面截取word
上面4个就是用来截取字符串的方法了。
有了着四种用法就不必使用cut命令来截取字符串了

第一种又可以分为四种情况,下面一一介绍。
1、使用 # 号操作符。用途是从左边开始删除第一次出现子字符串即其左边字符,保留右边字符。用法为#*substr,例如:
str='http://www.你的域名.com/cut-string.html'
echo ${str#*//}
得到的结果为www.你的域名.com/cut-string.html,即删除从左边开始到第一个"//"及其左边所有字符2、使用 ## 号操作符。用途是从左边开始删除最后一次出现子字符串即其左边字符,保留右边字符。用法为##*substr,例如:
str='http://www.你的域名.com/cut-string.html'
echo ${str##*/}
得到的结果为cut-string.html,即删除最后出现的"/"及其左边所有字符
3、使用 % 号操作符。用途是从右边开始删除第一次出现子字符串即其右边字符,保留左边字符。用法为%substr*,例如:
str='http://www.你的域名.com/cut-string.html'
echo ${str%/*}
得到的结果为http://www.你的域名.com,即删除从右边开始到第一个"/"及其右边所有字符
4、使用 %% 号操作符。用途是从右边开始删除最后一次出现子字符串即其右边字符,保留左边字符。用法为%%substr*,例如:
str='http://www.你的域名.com/cut-string.html'
echo ${str%%/*}
得到的结果为http://www.你的域名.com,即删除从右边开始到最后一个"/"及其右边所有字符

 第二种也分为四种,分别介绍如下:
1、从左边第几个字符开始以及字符的个数,用法为:start:len,例如:
str='http://www.你的域名.com/cut-string.html'
echo ${var:0:5}
其中的 0 表示左边第一个字符开始,5 表示字符的总个数。
结果是:http:
2、从左边第几个字符开始一直到结束,用法为:start,例如:
str='http://www.你的域名.com/cut-string.html'
echo ${var:7}
其中的 7 表示左边第8个字符开始
结果是:www.你的域名.com/cut-string.html
3、从右边第几个字符开始以及字符的个数,用法:0-start:len,例如:
str='http://www.你的域名.com/cut-string.html'
echo ${str:0-15:10}
其中的 0-6 表示右边算起第6个字符开始,10 表示字符的个数。
结果是:cut-string
3、从右边第几个字符开始一直到结束,用法:0-start,例如:
str='http://www.你的域名.com/cut-string.html'
echo ${str:0-4}
其中的 0-6 表示右边算起第6个字符开始,10 表示字符的个数。
结果是:html
注:(左边的第一个字符是用 0 表示,右边的第一个字符用 0-1 表示)

2.长度

[web97@salewell97 ~]$ test='I love china'
[web97@salewell97 ~]$ echo ${#test}
12

${#变量名}得到字符串长度

3.截取字串

[chengmo@localhost ~]$ test='I love china'
[chengmo@localhost ~]$ echo ${test:5}     
e china
[chengmo@localhost ~]$ echo ${test:5:10} 
e china

${变量名:起始:长度}得到子字符串

4.字符串删除

[chengmo@localhost ~]$ test='c:/windows/boot.ini'
[chengmo@localhost ~]$ echo ${test#/}
c:/windows/boot.ini
[chengmo@localhost ~]$ echo ${test#*/}
windows/boot.ini
[chengmo@localhost ~]$ echo ${test##*/}
boot.ini
[chengmo@localhost ~]$ echo ${test%/*} 
c:/windows
[chengmo@localhost ~]$ echo ${test%%/*}

${变量名#substring正则表达式}从字符串开头开始配备substring,删除匹配上的表达式。

${变量名%substring正则表达式}从字符串结尾开始配备substring,删除匹配上的表达式。

注意:${test##/},${test%/} 分别是得到文件名,或者目录地址最简单方法。

5.字符串替换

[chengmo@localhost ~]$ test='c:/windows/boot.ini'
[chengmo@localhost ~]$ echo ${test/\//\\}
c:\windows/boot.ini
[chengmo@localhost ~]$ echo ${test//\//\\}
c:\windows\boot.ini
linux环境下去除路径后面的/符号方法,如果路径作为参数传入shell脚本时,常用此方法进行处理
[root@open ~]# DIR="/export/server/logs/"
[root@open ~]# LOG_DIR=${DIR/%\//}
[root@open ~]# echo $LOG_DIR
/export/server/logs

${变量/查找/替换值} 一个“/”表示替换第一个,”//”表示替换所有,当查找中出现了:”/”请加转义符”/”表示。

四、性能比较

在shell中,通过awk,sed,expr 等都可以实现,字符串上述操作。下面我们进行性能比较。

 [chengmo@localhost ~]$ test='c:/windows/boot.ini'                       
 [chengmo@localhost ~]$ time for i in $(seq 10000);do a=${#test};done;           
 real    0m0.173s
 user    0m0.139s
 sys     0m0.004s

 [chengmo@localhost ~]$ time for i in $(seq 10000);do a=$(expr length $test);done;      
 real    0m9.734s
 user    0m1.628s

速度相差上百倍,调用外部命令处理,与内置操作符性能相差非常大。在shell编程中,尽量用内置操作符或者函数完成。使用awk,sed类似会出现这样结果。

推荐阅读更多精彩内容

  • 在做shell批处理程序时候,经常会涉及到字符串相关操作。有很多命令语句,如:awk,sed都可以做字符串各种操作...
    大福技术阅读 297评论 1 2
  • Spring Cloud为开发人员提供了快速构建分布式系统中一些常见模式的工具(例如配置管理,服务发现,断路器,智...
    卡卡罗2017阅读 121,188评论 16 134
  • 一、php可以做什么 php是一种可以在服务器端运行的编程语言,可以运行在Web服务器端。 php是一门后台编程语...
    空谷悠阅读 2,597评论 4 97
  • 今日立秋,黄历上加粗写着这四个字。一见到秋字不由暗惊已经到了准备收获的节令,于是急忙坐下审视一番,看看自己这大半年...
    艾潇土豆阅读 114评论 0 1
  • 时间在人们想起它的时候,有些事情已经来不及了,然后不得不感叹一下自己过往的浑噩生活。最后却也只是摇头叹息一下,表示...
    余巍_d00a阅读 64评论 0 0