代码改变世界

系统管理中 bash shell 脚本常用方法总结

2010-02-23 18:12  北方人  阅读(4354)  评论(0编辑  收藏  举报

在日常系统管理工作中,需要编写脚本来完成特定的功能,编写shell脚本是一个基本功了!
在编写的过程中,掌握一些常用的技巧和语法就可以完成大部分功能了,也就是2/8原则.

1. 单引号和双引号的区别

单引号与双引号的最大不同在于双引号仍然可以引用变量的内容,但单引号内仅是普通字符 ,不会作变量的引用,直接输出字符窜。请看如下例子:

  [root@linux ~]# name=HaHa 
[root@linux ~]# echo $name
HaHa
[root@linux ~]# myname="$name is wow"
[root@linux ~]# echo $myname
HaHa is wow
[root@linux ~]# myname='$name is wow'
[root@linux ~]# echo $myname
$name is wow

从上面例子可以看出,使用了单引号的时候,那么$name只是普通字符,直接输出而已!

2. 逐行读取文件

  • 使用for循环来读取文件
      for line in `cat file.txt`
    do
    echo $line
    done
注意:由于使用for来读入文件里的行时,会自动把空格和换行符作为一样分隔符,如果行里有空格的时候,输出的结果会很乱,所以只适用于行连续不能有空格或者换行符的文件
  • 使用while循环读取文件
      cat file.txt |while read line
    do
    echo $line
    done

    或者:

    while read line
    do
    echo $line
    done < file.txt
注意:由于使用while来读入文件里的行时,会整行读入,不会关注行的内容(空格..),所以比for读文件有更好的适用性,推荐使用while循环读取文件

3. bash shell 脚本中常用隐含变量

$0 当前执行的脚本或者命令名称
$1-$9 代表参数的位置. 举例 $1 代表第一个参数.
$# 脚本调用的参数的个数
$@ 所有参数的内容
$* 所有参数的内容
$$ 当前运行脚本的进程号
$? 命令执行后返回的状态
$! 后台运行的最后一个进程号
注意: $? 用于检查上一个命令执行是否正确(在Linux中,命令退出状态为0表示该命令正确执行,任何非0值表示命令出错)
$$ 变量最常见的用途是用做暂存文件的名字以保证暂存文件不会重复。
$* 和 $@ 如果输出是一样的,但是在使用for循环,在使用 双引号("")引用时 "$*" 会输出成一个元素 而 "$@" 会按照每个参数是一个元素方式输出

请看测试例子

  #cat test.sh 
#!/bin/sh
echo '"$@" output.....'
for i in "$@"
do
echo $i
done
echo '"$*" output ....'
for i in "$*"
do
echo $i
done

输出结果

  #sh test.sh a b c d
"$@" output.....
a
b
c
d
"$*" output ....
a b c d
从输出结果可以看出 "$*" 输出是一行 而 "$@" 输出则是四行

4. 变量内容的删除与替换

我们在一些情况下,需要对变量中的字符窜进行查找删除或者替换,就需要使用下表列出的方法

变量设定方式说明
${变量#关键字} 若变量内容从头开始的资料符合‘关键字’,则将符合的最短资料删除
${变量##关键字} 若变量内容从头开始的资料符合‘关键字’,则将符合的最长资料删除
${变量%关键字} 若变量内容从尾向前的资料符合‘关键字’,则将符合的最短资料删除
${变量%%关键字} 若变量内容从尾向前的资料符合‘关键字’,则将符合的最长资料删除
${变量/旧字串/新字串} 若变量内容符合‘旧字串’则‘第一个旧字串会被新字串取代
${变量//旧字串/新字串} 若变量内容符合‘旧字串’则‘全部的旧字串会被新字串取代

举例如下(删除字符窜中的某个字符):

  [root@linux ~]# export test_str="/usr/kerberos/sbin:/usr/kerberos/bin:/usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin:/root/bin" 
[root@linux ~]# echo ${test_str#/*kerberos/bin:}
/usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin:/root/bin

5. 变量条件测试赋值

在某些时刻我们需要‘判断’某个变量是否存在,若变量存在则将此变量值赋值给新的变量,若变量不存在则将其他值赋值给新的变量.

变量设定方式str 未定义str 为空字串str 已赋值为非空字串
var=${str-expr} var=expr var= var=$str
var=${str:-expr} var=expr var=expr var=$str
var=${str+expr} var= var=expr var=expr
var=${str:+expr} var= var= var=expr
var=${str?expr} expr 输出至 stderr var= var=$str
var=${str:?expr} expr 输出至 stderr expr 输出至 stderr var=$str
var=${str=expr} var=expr var= var=$str
var=${str:=expr} var=expr var=expr var=$str

举例如下:

  [root@linux ~]# test_name=""
[root@linux ~]# test_name=${test_name-root}
[root@linux ~]# echo $test_name
<== 因为 test_name 被设定为空字符窜!所以当然还是保留为空字符窜!
[root@linux ~]# test_name=${test_name:-root}
[root@linux ~]# echo $test_name
root <== 加上‘:’后若变量内容为空或者是未设定,都能够以后面的内容替换!
基本上这种变量的测试也能够透过 shell script 内的 if...then... 来处理,不过通过上述提及的简单的方法来测试变量,是程序看起来更精简一些!

6. shell 中分隔符 : 变量IFS 使用

shell脚本中,如果使用for循环一个字符窜的话,默认使用空格来分割字符窜.还有前面所提到的 使用for循环逐行读取文件内容时候,文件行中如果有空格的话输出的结果也会变乱.这个时候 使用 IFS 变量来设置特定的字符窜分割符来,达到输出正确的目的.默认情况下 IFS 是使用 <space><tab><newline>, 空格 \t \n 来作为默认的分割符的.

我们将前面使用for逐行读取文件的例子 改进下就可以输出正确了,请看下面

  #!/bin/bash
IFS_old=$IFS #将原IFS值保存,以便用完后恢复
IFS=$’\n’ #更改IFS值为$’\n’
for line in `cat file.txt`
do
echo $line
done

file.txt 文件内容如下

  [root@linux]$ cat file.txt 
sdfsdfsdfsdf
ssssss ssssss ssssss sssss
sdfsdfsdfsdfsdf

执行测试程序 输出结果如下(正确输出)

  [root@linux]$ sh test.sh 
sdfsdfsdfsdf
ssssss ssssss ssssss sssss
sdfsdfsdfsdfsdf

如果未设置IFS变量,使用默认的IFS变量值 ,输出结果如下

  [root@linux]$ sh test.sh 
sdfsdfsdfsdf
ssssss
ssssss
ssssss
sssss
sdfsdfsdfsdfsdf

从以上测试程序输出结果,可以根据自己的需求来设定 IFS变量,在举一个例子如下:

  while IFS=: read userName passWord userID groupID geCos homeDir userShell
do
echo "$userName -> $homeDir"
done < /etc/passwd

7. shell 数组的使用

数组赋值方式:

  (1) array=(var1 var2 var3 ... varN)
(2) array=([0]=var1 [1]=var2 [2]=var3 ... [n]=varN)
(3) array[0]=var1
arrya[1]=var2
...
array[n]=varN

计算数组元素个数或者长度:

  (1) ${#array[@]}    
(2) ${#array[*]}

了解了数组基础语法,举例说明,请看:

  #!/bin/bash
NAMESERVERS=("ns1.www.net." "ns2.www.net." "ns3.www.net.")
# 得到数组长度
tLen=${#NAMESERVERS[@]}

# 循环数组
for (( i=0; i<${tLen}; i++ ));
do
echo ${NAMESERVERS[$i]}
done

在看一个复杂一点的例子,将文件内容读取到数组中:

  #!/bin/bash

# 设置IFS将分割符 设置为 换行符(\n)
OLDIFS=$IFS
IFS=$'\n'

# 读取文件内容到数组
fileArray=($(cat file.txt))

# restore it
IFS=$OLDIFS
tLen=${#fileArray[@]}

# 循环显示文件内容
for (( i=0; i<${tLen}; i++ ));
do
echo "${fileArray[$i]}"
done

8. 逻辑判断 条件测试

  • 文件属性的判断
操作符测试结果
-e filename 文件存在返回1, 否则返回0
-r filename 文件可读返回1,否则返回0
-w filename 文件可写返回1,否则返回0
-x filename 文件可执行返回1,否则返回0
-o filename 文件属于用户本人返回1, 否则返回0
-z filename 文件长度为0返回1, 否则返回0
-f filename 文件为普通文件返回1, 否则返回0
-d filename 文件为目录文件时返回1, 否则返回0

举例如下,测试文件是否存在:

  #!/bin/bash
echo "checks the existence of the messages file."
echo -n "Checking..."
if [ -f /var/log/messages ];then
echo "/var/log/messages exists."
fi
echo
echo "...done."
  • 字符串比较
操作符比较结果
str1 = str2 当两个字串相等时为真
str1 != str2 当两个字串不等时为真
-n str1 当字符串的长度大于0时为真
-z str1 当字符串的长度为0时为真
str 当字符串为非空时为真

举例如下,比较字符串来测试用户ID :

  if [ "$(whoami)" != 'root' ]; then
echo "You have no permission to run $0 as non-root user."
exit 1;
fi
  • 数值比较(整数)
操作符比较结果
num1 -eq num2 两数相等为真
num1 -ne num2 两数不等为真
num1 -gt num2 num1大于num2为真
num1 -ge num2 num1大于等于num2为真
num1 -lt num2 num1小于num2为真
num1 -le num2 num1小于等于num2为真

举例如下:

  num=`wc -l work.txt`
if [ $num -gt 150 ];then
echo "you've worked hard enough for today."
echo
fi

如果要查看详细的测试操作,可以查看man手册 man test