12.1 什么是 Shell scripts

什么是 shell script (程序化脚本) 呢?就字面上的意义,我们将他分为两部份。 在“ shell ”部分,我们在 十章的 BASH 当中已经提过了,那是一个命令行下面让我们与系统沟通的一个工具接口。那么“ script ”是啥? 字面上的意义, script 是“脚本、剧本”的意思。整句话是说, shell script 是针对 shell 所写的“剧本!”

什么东西啊?其实, shell script 是利用 shell 的功能所写的一个“程序 (program)”,这个程序是使用纯文本文件,将一些 shell 的语法与指令(含外部指令)写在里面, 搭配正则表达式、管线命令与数据流重导向等功能,以达到我们所想要的处理目的。

所以,简单的说, shell script 就像是早期 DOS 年代的批处理文件 (.bat) ,最简单的功能就是将许多指令汇整写在一起, 让使用者很轻易的就能够 one touch 的方法去处理复杂的动作 (执行一个文件 "shell script" ,就能够一次执行多个指令)。 而且 shell script 更提供阵列、循环、条件与逻辑判断等重要功能,让使用者也可以直接以 shell 来撰写程序,而不必使用类似 C 程序语言等传统程序撰写的语法呢!

这么说你可以了解了吗?是的! shell script 可以简单的被看成是批处理文件, 也可以被说成是一个程序语言,且这个程序语言由于都是利用 shell 与相关工具指令, 所以不需要编译即可执行,且拥有不错的除错 (debug) 工具,所以,他可以帮助系统管理员快速的管理好主机。

12.1.1 干嘛学习 shell scripts

这是个好问题:“我又干嘛一定要学 shell script ?我又不是信息人,没有写程序的概念, 那我干嘛还要学 shell script 呢?不要学可不可以啊?”呵呵~如果 Linux 对你而言, 你只是想要“会用”而已,那么,不需要学 shell script 也还无所谓,这部分先给他跳过去, 等到有空的时候,再来好好的瞧一瞧。但是,如果你是真的想要玩清楚 Linux 的来龙去脉, 那么 shell script 就不可不知,为什么呢?因为:

  • 自动化管理的重要依据

不用鸟哥说你也知道,管理一部主机真不是件简单的事情,每天要进行的任务就有:查询登录文件、追踪流量、监控使用者使用主机状态、主机各项硬件设备状态、 主机软件更新查询、更不要说得应付其他使用者的突然要求了。而这些工作的进行可以分为: (1)自行手动处理,或是 (2)写个简单的程序来帮你每日“自动处理分析”这两种方式,你觉得哪种方式比较好? 当然是让系统自动工作比较好,对吧!呵呵~这就得要良好的 shell script 来帮忙的啦!

  • 追踪与管理系统的重要工作

虽然我们还没有提到服务启动的方法,不过,这里可以先提一下,我们 CentOS 6.x 以前的版本中,系统的服务 (services) 启动的接口是在 /etc/init.d/ 这个目录下,目录下的所有文件都是 scripts ; 另外,包括开机 (booting) 过程也都是利用 shell script 来帮忙搜寻系统的相关设置数据, 然后再代入各个服务的设置参数啊!举例来说,如果我们想要重新启动系统登录文件, 可以使用:/etc/init.d/rsyslogd restart ,那个 rsyslogd 文件就是 script 啦!

另外,鸟哥曾经在某一代的 Fedora 上面发现,启动 MySQL 这个数据库服务时,确实是可以启动的, 但是屏幕上却老是出现“failure”!后来才发现,原来是启动 MySQL 那个 script 会主动的以“空的密码”去尝试登陆 MySQL ,但为了安全性鸟哥修改过 MySQL 的密码啰~当然就登陆失败~ 后来改了改 script ,就略去这个问题啦!如此说来, script 确实是需要学习的啊!

时至今日,虽然 /etc/init.d/* 这个脚本启动的方式 (systemV) 已经被新一代的 systemd 所取代 (从 CentOS 7 开始), 但是很多的个别服务在管理他们的服务启动方面,还是使用 shell script 的机制喔!所以,最好还是能够熟悉啦!

  • 简单入侵侦测功能

当我们的系统有异状时,大多会将这些异状记录在系统记录器,也就是我们常提到的“系统登录文件”, 那么我们可以在固定的几分钟内主动的去分析系统登录文件,若察觉有问题,就立刻通报管理员, 或者是立刻加强防火墙的设置规则,如此一来,你的主机可就能够达到“自我保护”的聪明学习功能啦~ 举例来说,我们可以通过 shell script 去分析“当该封包尝试几次还是连线失败之后,就予以抵挡住该 IP”之类的举动,例如鸟哥写过一个关于抵挡砍站软件的 shell script , 就是用这个想法去达成的呢!

  • 连续指令单一化

其实,对于新手而言, script 最简单的功能就是:“汇整一些在 command line 下达的连续指令,将他写入 scripts 当中,而由直接执行 scripts 来启动一连串的 command line 指令输入!”例如: 防火墙连续规则 (iptables),开机载入程序的项目 (就是在 /etc/rc.d/rc.local 里头的数据) ,等等都是相似的功能啦! 其实,说穿了,如果不考虑 program 的部分,那么 scripts 也可以想成“仅是帮我们把一大串的指令汇整在一个文件里面, 而直接执行该文件就可以执行那一串又臭又长的指令段!”就是这么简单啦!

  • 简易的数据处理

第十一章、正则表达式与文件格式化处理 的 awk 程序说明中, 你可以发现, awk 可以用来处理简单的数据数据呢!例如薪资单的处理啊等等的。 shell script 的功能更强大,例如鸟哥曾经用 shell script 直接处理数据数据的比对啊, 文字数据的处理啊等等的,撰写方便,速度又快(因为在 Linux 性能较佳),真的是很不错用的啦!

举例来说,鸟哥每学期都得要以学生的学号来创建他们能够操作 Linux 的系统帐号,然后每个帐号还得要能够有磁盘容量的限制 (quota) 以及相关的设置等等, 那因为学校的校务系统提供的数据都是一整串学生信息,并没有单纯的学号字段,所以鸟哥就得要通过前几章的方法搭配 shell script 来自动处理相关设置流程, 这样才不会每学期都头疼一次啊!

  • 跨平台支持与学习历程较短

几乎所有的 Unix Like 上面都可以跑 shell script ,连 MS Windows 系列也有相关的 script 仿真器可以用, 此外, shell script 的语法是相当友好的,看都看的懂得文字 (虽然是英文),而不是机器码, 很容易学习~这些都是你可以加以考虑的学习点啊!

上面这些都是你考虑学习 shell script 的特点~此外, shell script 还可以简单的以 VIM 来直接编写,实在是很方便的好东西!所以,还是建议你学习一下啦。

不过,虽然 Shell script 号称是程序 (program) ,但实际上, shell script 处理数据的速度上是不太够的。因为 shell script 用的是外部的指令与 bash shell 的一些默认工具,所以,他常常会去调用外部的函数库,因此,运算速度上面当然比不上传统的程序语言。 所以啰, shell script 用在系统管理上面是很好的一项工具,但是用在处理大量数值运算上, 就不够好了,因为 Shell scripts 的速度较慢,且使用的 CPU 资源较多,造成主机资源的分配不良。还好, 我们通常利用 shell script 来处理服务器的侦测,倒是没有进行大量运算的需求啊!所以不必担心的啦!

12.1.2 第一支 script 的撰写与执行

如同前面讲到的,shell script 其实就是纯文本文件,我们可以编辑这个文件,然后让这个文件来帮我们一次执行多个指令, 或者是利用一些运算与逻辑判断来帮我们达成某些功能。所以啦,要编辑这个文件的内容时,当然就需要具备有 bash 指令下达的相关认识。下达指令需要注意的事项在 第四章 的开始下达指令小节内已经提过,有疑问请自行回去翻阅。 在 shell script 的撰写中还需要用到下面的注意事项:

  1. 指令的执行是从上而下、从左而右的分析与执行;
  2. 指令的下达就如同第四章内提到的: 指令、选项与参数间的多个空白都会被忽略掉;
  3. 空白行也将被忽略掉,并且 [tab] 按键所推开的空白同样视为空白键;
  4. 如果读取到一个 Enter 符号 (CR) ,就尝试开始执行该行 (或该串) 命令;
  5. 至于如果一行的内容太多,则可以使用“ [Enter] ”来延伸至下一行;
  6. “ # ”可做为注解!任何加在 # 后面的数据将全部被视为注解文字而被忽略!

如此一来,我们在 script 内所撰写的程序,就会被一行一行的执行。现在我们假设你写的这个程序文件名是 /home/dmtsai/shell.sh 好了,那如何执行这个文件?很简单,可以有下面几个方法:

  • 直接指令下达: shell.sh 文件必须要具备可读与可执行 (rx) 的权限,然后:
    • 绝对路径:使用 /home/dmtsai/shell.sh 来下达指令;
    • 相对路径:假设工作目录在 /home/dmtsai/ ,则使用 ./shell.sh 来执行
    • 变量“PATH”功能:将 shell.sh 放在 PATH 指定的目录内,例如: ~/bin/
  • 以 bash 程序来执行:通过“ bash shell.sh ”或“ sh shell.sh ”来执行

反正重点就是要让那个 shell.sh 内的指令可以被执行的意思啦! 咦!那我为何需要使用 ./shell.sh 来下达指令?忘记了吗?回去 第十章、认识与学习BASH 内的指令搜寻顺序察看一下, 你就会知道原因了!同时,由于 CentOS 默认使用者主文件夹下的 ~/bin 目录会被设置到 ${PATH} 内,所以你也可以将 shell.sh 创建在 /home/dmtsai/bin/ 下面 ( ~/bin 目录需要自行设置) 。此时,若 shell.sh 在 ~/bin 内且具有 rx 的权限,那就直接输入 shell.sh 即可执行该脚本程序!

那为何“ sh shell.sh ”也可以执行呢?这是因为 /bin/sh 其实就是 /bin/bash (链接文件),使用 sh shell.sh 亦即告诉系统,我想要直接以 bash 的功能来执行 shell.sh 这个文件内的相关指令的意思,所以此时你的 shell.sh 只要有 r 的权限即可被执行喔!而我们也可以利用 sh 的参数,如 -n 及 -x 来检查与追踪 shell.sh 的语法是否正确呢! ^_^

  • 撰写第一支 script

在武侠世界中,不论是那个门派,要学武功要从扫地与蹲马步做起,那么要学程序呢?呵呵,肯定是由“秀出 Hello World!” 这个字眼开始的!OK!那么鸟哥就先写一支 script 给大家瞧一瞧:

[[email protected] ~]$ mkdir bin; cd bin
[[email protected] bin]$ vim hello.sh
#!/bin/bash
# Program:
#       This program shows "Hello World!" in your screen.
# History:
# 2015/07/16    VBird    First release
PATH=/bin:/sbin:/usr/bin:/usr/sbin:/usr/local/bin:/usr/local/sbin:~/bin
export PATH
echo -e "Hello World! \a \n"
exit 0

在本章当中,请将所有撰写的 script 放置到你主文件夹的 ~/bin 这个目录内,未来比较好管理啦!上面的写法当中,鸟哥主要将整个程序的撰写分成数段,大致是这样:

  1. 第一行 #!/bin/bash 在宣告这个 script 使用的 shell 名称: 因为我们使用的是 bash ,所以,必须要以 **#!/bin/bash** 来宣告这个文件内的语法使用 bash 的语法!那么当这个程序被执行时,他就能够载入 bash 的相关环境配置文件 (一般来说就是 non-login shell 的 ~/.bashrc), 并且执行 bash 来使我们下面的指令能够执行!这很重要的!(在很多状况中,如果没有设置好这一行, 那么该程序很可能会无法执行,因为系统可能无法判断该程序需要使用什么 shell 来执行啊!)
  2. 程序内容的说明: 整个 script 当中,除了第一行的 #!是用来宣告 shell 的之外,其他的 # 都是“注解”用途! 所以上面的程序当中,第二行以下就是用来说明整个程序的基本数据。一般来说, 建议你一定要养成说明该 script 的:1. 内容与功能; 2. 版本信息; 3. 作者与联络方式; 4. 创建日期;5. 历史纪录 等等。这将有助于未来程序的改写与 debug 呢!
  3. 主要环境变量的宣告: 建议务必要将一些重要的环境变量设置好,鸟哥个人认为, PATH 与 LANG (如果有使用到输出相关的信息时) 是当中最重要的! 如此一来,则可让我们这支程序在进行时,可以直接下达一些外部指令,而不必写绝对路径呢!比较方便啦!
  4. 主要程序部分 就将主要的程序写好即可!在这个例子当中,就是 echo 那一行啦!
  5. 执行成果告知 (定义回传值) 是否记得我们在 第十章、认识与学习BASH 里面要讨论一个指令的执行成功与否,可以使用 $? 这个变量来观察~ 那么我们也可以利用 exit 这个指令来让程序中断,并且回传一个数值给系统。 在我们这个例子当中,鸟哥使用 exit 0 ,这代表离开 script 并且回传一个 0 给系统, 所以我执行完这个 script 后,若接着下达 echo $? 则可得到 0 的值喔! 更聪明的读者应该也知道了,呵呵!利用这个 exit n (n 是数字) 的功能,我们还可以自订错误讯息, 让这支程序变得更加的 smart 呢!

接下来通过刚刚上头介绍的执行方法来执行看看结果吧!

[[email protected] bin]$ sh hello.sh
Hello World !

你会看到屏幕是这样,而且应该还会听到“咚”的一声,为什么呢?还记得前一章提到的 printf 吧?用 echo 接着那些特殊的按键也可以发生同样的事情~ 不过, echo 必须要加上 -e 的选项才行!呵呵!在你写完这个小 script 之后,你就可以大声的说:“我也会写程序了”!哈哈! 很简单有趣吧~ ^_^

另外,你也可以利用:“chmod a+x hello.sh; ./hello.sh”来执行这个 script 的呢!

12.1.3 撰写 shell script 的良好习惯创建

一个良好习惯的养成是很重要的~大家在刚开始撰写程序的时候,最容易忽略这部分, 认为程序写出来就好了,其他的不重要。其实,如果程序的说明能够更清楚,那么对你自己是有很大的帮助的。

举例来说,鸟哥自己为了自己的需求,曾经撰写了不少的 script 来帮我进行主机 IP 的侦测啊、 登录文件分析与管理啊、自动上传下载重要配置文件啊等等的,不过,早期就是因为太懒了, 管理的主机又太多了,常常同一个程序在不同的主机上面进行更改,到最后,到底哪一支才是最新的都记不起来, 而且,重点是,我到底是改了哪里?为什么做那样的修改?都忘的一干二净~真要命~

所以,后来鸟哥在写程序的时候,通常会比较仔细的将程序的设计过程给他记录下来,而且还会记录一些历史纪录, 如此一来,好多了~至少很容易知道我修改了哪些数据,以及程序修改的理念与逻辑概念等等, 在维护上面是轻松很多很多的喔!

另外,在一些环境的设置上面,毕竟每个人的环境都不相同,为了取得较佳的执行环境, 我都会自行先定义好一些一定会被用到的环境变量,例如 PATH 这个玩意儿! 这样比较好啦~所以说,建议你一定要养成良好的 script 撰写习惯,在每个 script 的文件开始处记录好:

  • script 的功能;
  • script 的版本信息;
  • script 的作者与联络方式;
  • script 的版权宣告方式;
  • script 的 History (历史纪录);
  • script 内较特殊的指令,使用“绝对路径”的方式来下达;
  • script 运行时需要的环境变量预先宣告与设置。

除了记录这些信息之外,在较为特殊的程序码部分,个人建议务必要加上注解说明,可以帮助你非常非常多! 此外,程序码的撰写最好使用巢状方式,在包覆的内部程序码最好能以 [tab] 按键的空格向后推, 这样你的程序码会显的非常的漂亮与有条理!在查阅与 debug 上较为轻松愉快喔! 另外,使用撰写 script 的工具最好使用 VIM 而不是 vi ,因为 VIM 会有额外的语法检验机制,能够在第一阶段撰写时就发现语法方面的问题喔!

下一节:在第一支 shell script 撰写完毕之后,相信你应该具有基本的撰写功力了。接下来,在开始更深入的程序概念之前,我们先来玩一些简单的小范例好了。 下面的范例中,达成结果的方式相当的多,建议你先自行撰写看看,写完之后再与鸟哥写的内容比对, 这样才能更加深概念喔!好!不啰唆,我们就一个一个来玩吧!