Bootstrap

Shell脚本

一. shell概述

        

  • shell是一个命令行解释器, 它接受应用程序/用户命令 , 然后调用OS内核

         

1.Linux提供的shell解释器

         

2.bash 和 sh关系

         

3.centOS默认解析器是bash

         

        

二.shell脚本入门

                

  • 脚本以  #!/bin/bash  开头 (指定解析器)

脚本常用执行方式

(1)采用 bash 或 sh+ 脚本相对路径/绝对路径 (不用赋予脚本+x权限)

(2)采用输入脚本的绝对路径/相对路径执行脚本 (必须有  x 权限)

(3)在脚本路径前加上 "." / source

解释: 

  • 前两种方式都是在当前shell中打开-个子shell来执行脚本内容,当脚本内容结束,则子shell关闭,回到父shell中。
  • 第三种,也就是使用在脚本路径前加“."”或者source 的方式,可以使脚本内容在当前shell里执行,而无需打开子shell! 这也是为什么我们每次要修改完/etc/profile文件以后,需要source一下的原因。
  • 开子shell与不开子shell 的区别就在于,环境变量的继承关系,如在子shell中设置的当前变量,父shell是不可见的。

        

(4)补充

① 第一种执行方法,本质是bash解析器帮你执行脚本,所以脚本本身不需要执行权限。第二种执行方法,本质是脚本需要自己执行,所以需要执行权限。这两种方法都新起一个子进程

  • 无论是使用bash命令运行脚本,还是使用脚本文件的相对或绝对路径运行脚本,都会创建一个新的子shell来运行脚本。
  • 在使用bash命令运行脚本时,实际上是在当前shell中启动一个新的bash子进程,并将脚本作为该子进程的输入。该子进程会执行脚本中的命令,并在执行完成后退出
  • 在使用脚本文件的相对或绝对路径运行脚本时,则是通过操作系统的解释器来运行脚本。默无论使用哪种解释器,都会创建一个新的子shell来运行脚本,该子shell会执行脚本中的命令,并在执行完成后退出。
  • 需要注意的是,子shell与父shell是独立的,它们有自己的环境变量、工作目录等属性。因此,在子shell中定义的变量和修改的环境,不会影响到父shell的环境

         

② . 和 source 

                

                

三.变量 

1.系统预定义变量

        

2.自定义变量

(1)基本语法

  • 定义变量: 变量名=变量值 ,(注意,=号前后不能有空格)

  • 撤销变量: unset 变量名
  • 声明静态变量: readonly 变量, 注意 : 不能 unset

(2)变量定义规则

  • ①变量名称可以由字母,数字,下划线组成,当时不能以数字开头 , 环境变量名建议大写
  • ②等号两侧不能有空格
  • ③在bash中,变量默认类型都是字符串类型,无法直接进行数值运算
  • ④变量的值如果有空格,需要使用双引号或单引号括起来。

                 

(3)使用案例

①全局环境变量

         

 ②环境变量使用

         

 ③变量的值有空格需要用双引号 / 单引号括起来

         

 ④父shell和子shell中的局部变量

        

⑤bash中,变量默认类型都是字符串 , 无法直接进行数值运算

        

 3.特殊变量

(1)基本语法

① $n : n为数字 , $0代表脚本名称 ,$1 - $9 代表第一到第九个参数 , 10以上的参数需要大括号包含, 如${10}

        

  • ②$#  : 获取所有输入参数个数,常用于循环,判断参数的个数是否正确以及加强脚本的健壮性)
  • ③$* : 这个变量代表命令行中所有的参数$*把所有的参数看成一个整体
  • ④$@  : 这个变量也代表命令行中所有的参数不过$@把每个参数区分对待
  • ⑤$?  : 最后一次执行的命令的返回状态。如果这个变量的值为0,证明上一个命令正确执行:如果这个变量的值为非0 (具体是哪个数,由命令自己来决定),则证明上一个命令执行不正确了
     

                

        

四.运算符

$((运算式))  /  $[ 运算式 ]

                         

                

        

五.条件判断

1.基本语法

  •  test condition

  • [ condition ] (condition 前后要有空格)
  • 注意:条件非空即为true, [ aguigu ]返回true, [ ] 返回false.
     

         

2.常用判断条件

(1)两个整数之间比较

  • -eq 等于(equal)
  • -ne 不等于(not equal)
  • -It 小于(less than)
  • -le 小于等于(less equal)
  • -gt 大于(greater than)
  • -ge 大于等于(greater equal)
  • 注:如果是字符串之间的比较,用等号“="判断相等:用“="判断不等。

(2)按照文件权限进行判断

  • -r 有读的权限(read)
  • -w 有写的权限(write)
  • -x 有执行的权限(execute)

(3)按照文件类型进行判断

  • -e 文件存在(existence )
  • -f 文件存在并且是一个常规的文件(file)
  • -d 文件存在并且是一个目录(directory)

         

3.案例

        

        

六.流程控制

1. if 判断

(1)单分支

if [ 条件判断表达式 ];then

        程序

fi 

if [ 条件判断表达式 ]

then

        程序

fi 

         

(2)多分支

if [ 条件判断表达式 ]

then

        程序

elif [ 条件判断表达式 ]

then

        程序

else

        程序

fi 

         

(3)注意事项

  • ①[ 条件判断式 ], 中括号和条件判断式之间必须有空格
  • ②if后要有空格

         

 (4)案例

①条件组合

         

②拼接组合 

         

③多条件判断

        

2.case语句

(1)语法

case $变量名 in
"值1")
        如果变量的值等于值1,则执行程序1
;;
"值2")
        如果变量的值等于值2,则执行程序2
;;
        ...省略其他分支...
*)
        如果变量的值都不是以上的值,则执行此程序
;;

esac

注意事项:

  • ① case行尾必须为单词“in",每一个模式匹配必须以右括号“ ) ”结束.
  • ② 双分号“;”表示命令序列结束,相当于c++中的break.
  • ③ 最后的“ *) ”表示默认模式,相当于c++中的default.

        

(2)案例 

        

3.for循环

(1)基本语法

for (( 初始值;循环控制条件;变量变化 )) 

do

        程序

done

 for in 值1 值2 值3 ...

do

        程序

done

         

 (2)案例

                

 (3)比较 $@ 和 $*区别

  •  $*和$@都表示传递给函数或脚本的所有参数,不被双引号“"”包含时,都以$1 $2.. $n 的形式输出所有参数。
  • 当它们被双引号“ ”包含时,$* 会将所有的参数作为一个整体,以“$1 $2.. $n"的形式输出所有参数: $@会将各个参数分开,以“1” “2...“$n"的形式输出所有参数。

        

4.while循环

(1)语法

while [ 条件判断式 ]

do 

        程序

done 

 (2)案例

                

        

 七.read读取控制台输入

1.基本语法

read  (选项)  (参数)

①选项:

  • -p : 指定读取值时的提示符:
  • -t : 指定读取值时等待的时间(秒)如果-t 不加表示一直等待

②参数

     变量:指定读取值的变量名

        

 2.案例

                

                                

八.函数 

1.系统函数

(1)basename

①语法

  • basename [string / pathname] [suffix]
  • 功能描述 : basename命令会删掉所有的前缀包括最后一个(' / ')字符,然后将字符串显示出来, basename可以理解为取路径里的文件名称
  • 选项:  suffix为后缀,如果suffix被指定了, basename会将pathname或string中的suffix去掉。
  • 不检测路径的合法性

         

②案例

                 

 (2)dirname

  • dirname 文件绝对路径
  •  功能描述:从给定的包含绝对路径的文件名中去除文件名(非目录的部分),然后返回剩下的路径(目录的部分) 
  • dirname可以理解为取文件路径的绝对路径名称
     

(3)综合案例

        

2.自定义函数

(1)基本语法

[ function ] funname[()]

{

        Action;
        [return int;]

}

  • ①必须在调用函数地方之前,先声明函数,shell 脚本是逐行运行。不会像其它语言一样先编译.
  • ②函数返回值,只能通过 $? 系统变量获得,可以显示加: return返回, 如果不加,将以最后一条命令运行结果,作为返回值。return 后跟数值n(0-255)

 (2)案例

                

                        

                

 九.正则表达式

  • 正则表达式使用单个字符串来描述、匹配一系列符合某个语法规则的字符串。
  • 在很多文本编辑器里,正则表达式通常被用来检索、替换那些符合某个模式的文本。
  • 在Linux中, grep,sed,awk 等文本处理工具都支持通过正则表达式进行模式匹配。
  • 正则表达式:简单来讲,可以非常灵活的帮我们定义各种各样的模糊匹配,筛选规则.

 特殊字符匹配

1.特殊字符: ^      ^匹配一行的开头

         

2.特殊字符: $     $匹配一行的结束

                 

3.思考 : ^$ 匹配什么?

         

4.特殊字符 : .     .匹配任意一个字符  

 

5.特殊字符: *     *不单独使用 , 它和上一个字符连用 , 表示匹配上一个字符0次或多次

6.思考 : .* 匹配什么 ? 

                 

7.字符区间(中括号) : [ ]

  • [ ]表示匹配某个范围内的一个字符,例如 :
  • [6,8] --- 匹配6或者8
  • [0 - 9] ---- 匹配一个0-9的数字
  • [0 - 9]* ---- 匹配任意长度的数字字符串
  • [a - z] --- 匹配一个a-z 之间的字符
  • [a - z]* --- 匹配任意长度的字母字符串
  • [a-c, e-f] 匹配a-c或者e-f之间的任意字符
     

         

8.特殊字符 : \

  • \表示转义,并不会单独使用。由于所有特殊字符都有其特定匹配模式,当我们想匹配某一特殊字符本身时(例如,我想找出所有包含'$的行),就会碰到困难。
  • 此时我们就要将转义字符和特殊字符连用,来表示特殊字符本身

         

9.综合应用

         

                

十.文本处理工具 

1.cut

  • cut的工作就是“剪”,具体的说就是在文件中负责剪切数据用的。
  • cut 命令从文件的每一行剪切字节、字符和字段并将这些字节、字符和字段输出。

        
(1)语法

  • cut [ 选项参数 ]  filename
  • 说明 : 默认分隔符是制表符

         

(2)选项参数说明

选项参数功能
-f列号,提取第几列
-d分隔符,按照指定分隔符分割列,默认是制表符“\t”
-c按字符进行切割后加加n表示取第几列比如-c 1

        

(3) 案例

2.awk

一个强大的文本分析工具,把文件逐行的读入,以空格为默认分隔符将每行切片,切开
的部分再进行分析处理。

        
(1)基本用法

  • awk  [选项参数]  'patten1/{action1}  /pattern2/{acnion2} ...’  filename
  • pattern : 表示awk在数据中查找的内容,就是匹配模式
  • action : 在找到匹配内容时所执行的一系列命令

         

(2)选项参数说明 

选项参数功能
-F指定输入文件分隔符
-v赋值一个用户定义变量

         

(3)awk内置变量 

变量说明
FILENAME文件名
NR已读的记录数(行号)
NF浏览记录的域的个数(切割后,列的个数)

         

(4)案例

         

①查看第七列 

         

②查看其他列

                 

 ③BEGIN在所有数据读取行之前执行 ,  END在所有数据执行之后执行。

         

④给passwd文件中id增加数值1

 

 ⑤统计passwd的文件名,每行行号,每行的列数

         

 ⑥查询空行所在行号

         

 ⑦切割IP

                        

十一.综合案例

1.归档文件

  • 实际生产应用中,往往需要对重要数据进行归档备份。
  • 需求:实现一个每天对指定目录归档备份的脚本,输入一个目录名称(末尾不带/),将目录下所有文件按天归档保存,并将归档日期附加在归档文件名上
  • 这里用到了归档命令: tar 后面可以加,上-c选项表示归档,加上z选项表示同时进行压缩,得到的文件后缀名为.tar.gz.
     

 

 

                

2.发送消息

  • 可以使用Linux自带的write 和 mes 工具,向其他用户发送消息
  • 需求: 实现一个向某个特定用户快速发送消息的脚本,输入用户名作为第一个参数,后面直接跟要发送的消息. 脚本需要检测用户是否登录在系统中 , 是否打开消息功能 , 以及当前发送消息是否为空. 

(1)补充

         

(2)完整情况

;