shell脚本进阶篇

-----------------------------------------------------------------------------------------------------------------------------------------------

流程控制

过程式编程语言

    顺序执行

    选择执行

    循环执行

 

条件选择语句

单分支

  if 判断条件;then

          条件为真的分支代码

  fi

双分支

  if 判断条件;then

          条件为真的分支代码

  else

           条件为假的分支代码

  fi

双分支不等于cmd1 && cmd2 || cmd3,双分支cmd2成功与否无所谓,后者cmd2很关键

多分支,可以不止下例中的3个判断条件,可以更多

  if 判断条件1;then

          条件为真的分支代码1

  elif 判断条件2;then

          条件为真的分支代码2

  elif 判断条件3;then

          条件为真的分支代码3

  else

          条件为假的分支代码

   fi

 

case语句

case 变量 in

PAT1)

    分支1

    ;;

PAT2)

    分支2

     ;;

*)

     ;;

 其它条件输出情况

     ;;

esac

PAT里可以用|表示或关系

 

循环语句

循环执行

   将某代码段重复运行多次

   重复运行多少次

         循环次数事先已知

         循环次数事先未知

   有进入条件和退出条件

for,while,until

 

for循环

for 变量名(不加$) in 列表;do

    循环体

done

for num in 1 2 3 4 5;

do echo $num;

done

1+2+3+…+100

sum=0;for i in {1..100};do sum=$((sum+i));done;echo sum=$sum

sum=0;for I in `seq 1 2 100`; do sum=$((sum+i));done;echo sum=$sum

 

批量执行找到的脚本

for filename in *.sh;

do

./ $filename;

done

 

创建100个账号 密码 magedu 第一次登录更改口令

for u in {1..100};

do

  useradd user$u

  echo magedu > passwd --stdin user$u

 

done

for …;do

{ if …

 

fi } &

done

wait

if到fi并发可以这么表示

wait表示前端进程结束后程序依然卡在那,加入wait会自动结束

 

列表生成方式:

  (1) 直接给出列表

  (2) 整数列表:

     (a) {start..end}

     (b) $(seq [start [step]] end)  比如for num in `seq 1 2 10`,表明num序列在1 3 5 7 9奇数序列

  (3) 返回列表的命令

         $(COMMAND)

  (4) 使用glob,如:*.sh,通配符,比如说 for file in /home/*.sh; ,此时$file 值为/home/*

  (5) 变量引用;

         $@, $*

 

国际象棋

shell脚本进阶篇_条件选择


while循环

while 条件;do

     循环体

done

 

1+2+…+100?

sum=0;i=1;while [ $i -le 100 ];

do

let sum+=i  或者sum=$[sum+i]

let i++;

done

echo $sum

 

until  条件;do

    循环体

done

until的条件为真就退出,为假执行循环体

查看到某个账户连接本机进行并踢出

until who | grep -q “^hacker\>”;do

sleep 3

done

pkill -9 -U hacker

永远执行

until false ;do

who | grep -q “^hacker\> &/dev/nell”;

sleep 3

pkill -9 -U hacker

done

 

if …;then

    continue    continue:默认为continue1

fi

continue处:默认为continue1,条件到达时,到达条件的结果不循环,跳过

continue处:continue 2为遇到条件到达时本层循环结束,跳至上一级循环进行执行

 

break 1:相当于continu 2

break 2:跳出全循环

 

for ((exp1;exp2;exp3));do

done

exp1真假无所谓

exp2为真:执行循环体内命令并转exp3,无论真假后继续回到exp2继续执行

     为假:退出程序:

 

检测httpd服务脚本

每10秒随时都要检测服务进程

脚本内容

if killall -0 httpd &> /dev/null ;then

        true

else

        service httpd restart &> /dev/null

        echo “AT `date +’%F%T’` httpd restart” >> /var/log/httpdcheck.log

fi

sleep 10

done

脚本结束后后台运行 ./脚本名 &

 

循环控制shift命令

shift 用于将参量列表左移指定次数,默认为左移一次

定义rm.sh脚本,将rm变为移动到/data下的目录,使用时后面可能有大量参数,shift可以进行逐个顺序处理

shell脚本进阶篇_shell脚本编程_02

 

无限循环

while true;do

done

或者

until false;do

done

或者

for((;;));do

done

猜数字游戏

shell脚本进阶篇_shell脚本编程_03

echo "sinaops" |read var;echo $var 答案是空

echo “sinaops” | while read var;do echo $var;done 答案是sinaops

echo -e “sinaops\nsouhu\n163” | while read var;do echo $var;done 答案是sinaops

                                                                                                                 sohu

                                                                                                                 163

 

echo -e “sinaops\nsouhu\n163” | while read var;do echo $var;done

标准输出 | while read变量名,表示逐行处理

shell脚本进阶篇_条件选择_04


扫描/etc/passwd文件每一行,如发现GECOS字段为空,则填充用户名和单位电话为62985600,并提示该用户的GECOS信息修改成功

shell脚本进阶篇_shell脚本编程_05

 

select用法

select 变量名 in 列表;do done

循环中有一个变量$REPLY,用来存储选择的数字

PS3:改变脚本中select循环的提示语句

shell脚本进阶篇_shell脚本编程_06 

 

函数

<1>函数function是由若干条shell命令组成的语句块,实现代码重用和模块化编程,不开启子shell

<2>它与shell程序形式上是相似的,不同的是它不是一个单独的进程,不能独立运行,而是shell程序的一部分

<3>函数和shell程序比较相似,区别在于:

   Shell程序在子Shell中运行

   而Shell函数在当前Shell中运行。因此在当前Shell中,函数可以对shell中变量进行修改

 

定义函数

<1>函数由两部分组成:函数名和函数体

<2>help function

<3>语法一:

f_name (){

...函数体...

}

<4>语法二:

function f_name {

...函数体...

}

<5>语法三:

function f_name () {

...函数体...

}

 

函数生效在当前的shell环境里

declare -f 函数:显示函数的定义

unset 函数:删除刚定义的函数

 

匿名函数:没有名字的函数,只用一次,后面不再调用

比如说false || { ls ; exit; }中的{ ls ; exit; }

脚本中定义函数,脚本结束后脚本中的函数将不再有效

本地变量:local 变量名,只影响自己函数的结果,比如说

shell脚本进阶篇_循环语句_07


脚本中执行函数脚本引入函数体,不同目录下引用时需要加路径

函数中return:返回调用的命令,本段函数不再执行,执行下一段函数

shell脚本进阶篇_条件选择_08

action “描述”


函数使用

<1>函数的定义和使用:

   可在交互式环境下定义函数

   可将函数放在脚本文件中作为它的一部分

   可放在只包含函数的单独文件中

<2>调用:函数只有被调用才会执行

   调用:给定函数名

   函数名出现的地方,会被自动替换为函数代码

<3>函数的生命周期:被调用时创建,返回时终止

 

函数返回值

<1>函数有两种返回值:

<2>函数的执行结果返回值:

  (1)使用echo等命令进行输出

  (2)函数体中调用命令的输出结果

<3>函数的退出状态码:

  (1)默认取决于函数中执行的最后一条命令的退出状态码

  (2)自定义退出状态码,其格式为:

   return 从函数中返回,用最后状态命令决定返回值

   return 0 无错误返回。

   return 1-255 有错误返回

 

交互式环境下定义和使用函数

<1>示例:

   dir() {

   > ls -l

   > }

<2>定义该函数后,若在$后面键入dir,其显示结果同ls -l的作用相同

dir

<3>该dir函数将一直保留到用户从系统退出,或执行了如下所示的unset命令

unset dir

 

在脚本中定义及使用函数

<1>函数在使用前必须定义,因此应将函数定义放在脚本开始部分,直至shell首次发现它

后才能使用

<2>调用函数仅使用其函数名即可

 

使用函数文件

<1>可以将经常使用的函数存入函数文件,然后将函数文件载入shell

<2>文件名可任意选取,但最好与相关任务有某种联系。例如:functions.main

<3>一旦函数文件载入shell,就可以在命令行或脚本中调用函数。可以使用set命令查看所有定义的函数,其输出列表包括已经载入shell的所有函数

<4>若要改动函数,首先用unset命令从shell中删除函数。改动完毕后,再重新载

入此文件

 

函数变量

<1>变量作用域:

    环境变量:当前shell和子shell有效,

    声明环境函数

    declare -xf 函数名,或者export -f函数名,声明后可以传递给子进程使用

    本地变量:只在当前shell进程有效,为执行脚本会启动专用子shell进程;

    因此,本地变量的作用范围是当前shell脚本程序文件,包括脚本中的函数

局部变量:函数的生命周期;函数结束时变量被自动销毁

<2>注意:如果函数中有局部变量,如果其名称同本地变量,使 用局部变量

<3>在函数中定义局部变量的方法

   local NAME=VALUE

 

函数递归示例

<1>函数递归:

函数直接或间接调用自身

注意递归层数

<2>递归实例:

   阶乘是基斯顿·卡曼于 1808 年发明的运算符号,是数学术语

一个正整数的阶乘(factorial)是所有小于及等于该数的正整数的积,并且有0的

阶乘为1,自然数n的阶乘写作n!

   n!=1×2×3×...×n

   阶乘亦可以递归方式定义:0!=1,n!=(n-1)!×n

   n!=n(n-1)(n-2)...1

   n(n-1)! = n(n-1)(n-2)!

函数表示,不过不输入此函数将会无限生成子进程直到崩溃

shell脚本进阶篇_shell脚本编程_09

 

fork×××

<1>fork×××是一种恶意程序,它的内部是一个不断在fork进程的无限循环,实质是一个简单的递归程序。由于程序是递归的,如果没有任何限制,这会导致这个简单的程序迅速耗尽系统里面的所有资源

<2>函数实现

   :(){ :|:& };:

   bomb() { bomb | bomb & }; bomb

<3>脚本实现

   cat Bomb.sh

   #!/bin/bash

   ./$0|./$0&

 

信号捕捉

<1>trap '触发指令' 信号

   自定义进程收到系统发出的指定信号后,将执行触发指令,而不会执行原操作

<2>trap '' 信号

   忽略信号的操作

<3>trap '-' 信号

   恢复原信号的操作

<4>trap -p

   列出自定义信号操作

trap -l 列出信号列表


shell脚本进阶篇_条件选择_10

捕获2号信号,即ctrl+c信号,捕捉到此信号后输入字段并不执行命令

21到30输出时候恢复ctrl+c功能

shell脚本进阶篇_shell脚本编程_11

2号:ctrl+c,15号kill信号,9号信号强制结束不能被捕获

 

捕获退出,退出后执行一次函数

shell脚本进阶篇_条件选择_12

 

数组:同一类型变量放到一个数组里,用下标(索引)方式取出数组

<1>变量:存储单个元素的内存空间

<2>数组:存储多个元素的连续的内存空间,相当于多个变量的集合

<3>数组名和索引

   索引:编号从0开始,属于数值索引

   索引可支持使用自定义的格式,而不仅是数值格式,即为关联索引,bash4.0版本之后开始支持

   bash的数组支持稀疏格式(索引不连续)

<4>声明数组:

   declare -a ARRAY_NAME

   declare -A ARRAY_NAME: 关联数组使用前必须声明

   注意:两者不可相互转换

 

数组中的下标3对应数组中第4个

 

使用时需要先声明数组,echo时候要带花括号



shell脚本进阶篇_循环语句_13

shell脚本进阶篇_shell脚本编程_14

shell脚本进阶篇_shell脚本编程_15

shell脚本进阶篇_条件选择_16

shell脚本进阶篇_条件选择_17



 

表示数组个数

shell脚本进阶篇_shell脚本编程_18

 

增加元素

shell脚本进阶篇_循环语句_19

 

删除数组

shell脚本进阶篇_循环语句_20

 

数组数据处理

<1>引用数组中的元素:

   数组切片:${ARRAY[@]:offset:number}

      offset: 要跳过的元素个数

      number: 要取出的元素个数

      取偏移量之后的所有元素 ${ARRAY[@]:offset}

<2>向数组中追加元素:

   ARRAY[${#ARRAY[*]}]=value

<3>关联数组:

   declare -A ARRAY_NAME

   ARRAY_NAME=([idx_name1]='val1' [idx_name2]='val2‘...)

   注意:关联数组必须先声明再调用

shell脚本进阶篇_循环语句_21

 

字符串切片

<1>${#var}:返回字符串变量var的长度

<2>${var:offset}:返回字符串变量var中从第offset个字符后(不包括第offset个字符)的字符开始,到最后的部分,offset的取值在0 到 ${#var}-1 之间(bash4.2后,允许为负值)

<3>${var:offset:number}:返回字符串变量var中从第offset个字符后(不包括第offset个字符)的字符开始,长度为number的部分

<4>${var: -length}:取字符串的最右侧几个字符

注意:冒号后必须有一空白字符

<5>${var:offset:-length}:从最左侧跳过offset字符,一直向右取到距离最右侧lengh个字符之前的内容

<6>${var: -length:-offset}:先从最右侧向左取到length个字符开始,再向右取到距离最右侧offset个字符之间的内容

   注意:-length前空格


shell脚本进阶篇_循环语句_22

shell脚本进阶篇_循环语句_23

shell脚本进阶篇_循环语句_24


 

字符串处理

<1>基于模式取子串

   ${var#*word}:其中word可以是指定的任意字符

   功能:自左而右,查找var变量所存储的字符串中,第一次出现的word, 删除字符串开头至第一次出现word字符之间的所有字符

   ${var##*word}:同上,贪婪模式,不同的是,删除的是字符串开头至最后一次由word指定的字符之间的所有内容

<2>示例:

   file=“var/log/messages”

   ${file#*/}: log/messages

   ${file##*/}: messages

<3>${var%word*}:其中word可以是指定的任意字符

   功能:自右而左,查找var变量所存储的字符串中,第一次出现的word, 删除字符串最后一个字符向左至第一次出现word字符之间的所有字符

file="/var/log/messages"

   ${file%/*}: /var/log

<4>${var%%word*}:同上,只不过删除字符串最右侧的字符向左至最后一次出现word字符之间的所有字符;

<5>示例:

   url=http://www.magedu.com:80

   ${url##*:} 80

   ${url%%:*} http

<6>查找替换

   ${var/pattern/substr}:查找var所表示的字符串中,第一次被pattern所匹配到的字符串,以substr替换之

   ${var//pattern/substr}: 查找var所表示的字符串中,所有能被pattern所匹配到的字符串,以substr替换之

   ${var/#pattern/substr}:查找var所表示的字符串中,行首被pattern所匹配到的字符串,以substr替换之

   ${var/%pattern/substr}:查找var所表示的字符串中,行尾被pattern所匹配到的字符串,以substr替换之

<7>查找并删除

   ${var/pattern}:删除var表示的字符串中第一次被pattern匹配到的字符串

   ${var//pattern}:删除var表示的字符串中所有被pattern匹配到的字符串

   ${var/#pattern}:删除var表示的字符串中所有以pattern为行首匹配到的字符串

   ${var/%pattern}:删除var所表示的字符串中所有以pattern为行尾所匹配到的字符串

<8>字符大小写转换

   ${var^^}:把var中的所有小写字母转换为大写

   ${var,,}:把var中的所有大写字母转换为小写

 

变量复制

shell脚本进阶篇_条件选择_25

 

高级变量用法-有类型变量

<1>Shell变量一般是无类型的,但是bash Shell提供了declare和typeset两个命令用于指定变量的类型,两个命令是等价的

<2>declare [选项] 变量名

   -r 声明或显示只读变量

   -i 将变量定义为整型数

   -a 将变量定义为数组

   -A 将变量定义为关联数组

   -f 显示已定义的所有函数名及其内容

   -F 仅显示已定义的所有函数名

   -x 声明或显示环境变量和函数

   -l 声明变量为小写字母 declare –l var=UPPER

   -u 声明变量为大写字母 declare –u var=lower

 

eval命令,很实用

<1>eval命令将会首先扫描命令行进行所有的置换,然后再执行该命令。该命令适用于那些一次扫描无法实现其功能的变量.该命令对变量进行两次扫描

<2>示例:

   举例一

   [root@server ~]# CMD=whoami

   [root@server ~]# echo $CMD

   whoami

   [root@server ~]# eval $CMD

   root

   举例二

   [root@server ~]# n=10

   [root@server ~]# echo {0..$n}

   {0..10}

   [root@server ~]# eval echo {0..$n}

   0 1 2 3 4 5 6 7 8 9 10

 

间接变量引用

<1>如果第一个变量的值是第二个变量的名字,从第一个变量引用第二个变量的值就称为间接变量引用

<2>variable1的值是variable2,而variable2又是变量名,variable2的值为value,间接变量引用是指通过variable1获得变量值value的行为

   variable1=variable2

   variable2=value

<3>bash Shell提供了两种格式实现间接变量引用

   eval tempvar=\$$variable1

   tempvar=${!variable1}

<4>示例:

   [root@server ~]# N=NAME

   [root@server ~]# NAME=wangxiaochun

   [root@server ~]# N1=${!N}

   [root@server ~]# echo $N1

   wangxiaochun

   [root@server ~]# eval N2=\$$N

   [root@server ~]# echo $N2

   wangxiaochun

 

间接引用eval举例

shell脚本进阶篇_循环语句_26

 

创建临时文件

<1>mktemp命令:创建并显示临时文件,可避免冲突

<2>mktemp [OPTION]... [TEMPLATE]

     TEMPLATE: filenameXXX

       X至少要出现三个

<3>OPTION:

   -d: 创建临时目录

   -p DIR或--tmpdir=DIR:指明临时文件所存放目录位置

<4>示例:

   mktemp /tmp/testXXX

   tmpdir=`mktemp –d /tmp/testdirXXX`

   mktemp --tmpdir=/testdir testXXXXXX

 shell脚本进阶篇_循环语句_27

 

安装复制文件

<1>install命令:

   install [OPTION]... [-T] SOURCE DEST 单文件

   install [OPTION]... SOURCE... DIRECTORY

   install [OPTION]... -t DIRECTORY SOURCE...

   install [OPTION]... -d DIRECTORY...创建空目录

<2>选项:

   -m MODE,默认755

   -o OWNER

   -g GROUP

<3>示例:

   install -m 700 -o wang -g admins srcfile desfile

   install –m 770 –d /testdir/installdir

 

expect介绍

expect 是由Don Libes基于Tcl( Tool Command Language )语言开发的,主要应用于自动化交互式操作的场景,借助Expect处理交互的命令,可以将交互过程如:ssh登录,ftp登录等写在一个脚本上,使之自动化完成。尤其适用于需要对多台服务器执行相同操作的环境中,可以大大提高系统管理人员的工作效率。交互式改变为非交互式便于自动化脚本编写

 

expect命令

<1>expect 语法:

   expect [选项] [ -c cmds ] [ [ -[f|b] ] cmdfile ] [ args ]

<2>选项

   -c:从命令行执行expect脚本,默认expect是交互地执行的

   示例:expect -c 'expect "\n" {send "pressed enter\n"}

   -d:可以输出输出调试信息

   示例:expect -d ssh.exp

<3>expect中相关命令

   spawn:启动新的进程

   send:用于向进程发送字符串

   expect:从进程接收字符串

   interact:允许用户交互

   exp_continue 匹配多个字符串在执行动作后加此命令