导航

Shell脚本入门

此笔记为学习Shell脚本所记录,学习视频为尚硅谷Shell脚本入门到实战

脚本格式

脚本以#!/bin/bash

第一个Shell脚本helloworld

  • 需求:创建一个Shell脚本,输出helloworld

  • touch helloworld.sh
    
    vim helloworld.sh
    
    #在脚本程序输入以下内容:
    #!/bin/bash
    echp "Hello world!"
    
  • 脚本的常用执行方式:

    1. 采用bash或sh+脚本的相对路径或绝对路径(不用赋予脚本+x权限)
    2. 采用输入脚本的绝对路径或相对路径执行脚本(必须具有可执行权限+x)
  • 第二个Shell脚本:多命令处理

  • 需求:在/home/atguigu/目录下创建一个banzhang.txt,在banzhang.txt文件中增加“I love cls”。

  • touch batch.sh
    
    vim batch.sh
    
    #在batch.sh中输入如下内容
    #!/bin/bash
    touch /home/atguigu/banzhang.txt
    echo "I love cls" >> banzhang.txt
    

Shell中的变量

系统变量

常用系统变量

\(HOME、\)PWD、¥SHELL、$USER等

案例实操

  • 查看系统变量的值echo $HOME
  • 显示当前shell中所有变量 set

自定义变量

基本语法

  • 定义变量:变量=值
  • 撤销变量:unset 变量
  • 声明静态变量:readonly变量,注意:不能unset

变量定义规则

  1. 变量名称可以由字母、数字和下划线组成,但是不能以数字开头,环境变量名建议大写。
  2. 等号两侧不能有空格
  3. 在bash中,变量默认类型都是字符串类型,无法直接进行数值运算。
  4. 变量的值如果有空格,需要使用双引号或单引号括起来。

案例实操

  • 定义变量A A=5
  • 给变量A重新赋值 A=6
  • 撤销变量A unset A
  • 声明静态变量B(不能unsset )readonly B=2
  • 在bash中,变量默认类型都是字符串类型,无法直接进行数值运算
  • 可以把变量提升为全局环境变量,可供其他shell程序使用export 变量名

特殊变量$n

基本语法

$n:功能描述:

  • n为数字,$0代表该脚本名称,$1-\(9代表第一到第九个参数,十以上的参数,十以上的参数需要用大括号包含,如\)

案例实操

输出该脚本文件名称、输入参数1和输入参数2的值:

touch parameter.sh
vim parameter.sh

#脚本内容
#!/bin/bash
echo "$0 $1 $2"

chmod 777 parameter.sh
./parameter.sh cls xz

特殊变量$#

基本语法

$#功能描述:

  • 获取所有输入参数个数,常用于循环

案例实操

获取输入参数的个数

vim parameter.sh

#输入脚本内容
#!/bin/bash
echo "$0  $1   $2"
echo $#

chmod 777 parameter.sh

./parameter.sh cls  xz

特殊变量\(*、\)@

基本语法

  • $*功能描述:
    • 代表命令行中所有的参数,$*把所有的参数看成一个整体
  • $@:功能描述:
    • 代表命令行中所有的参数,但$@把每个参数区分对待

案例实操

打印输入的所有参数

vim parameter.sh

#输入脚本内容
#!/bin/bash
echo "$0 $1 $2"
echo $#
echo$@

#输出结果
bash parameter.sh 1 2 3
parameter.sh  1   2
3
1 2 3
1 2 3

特殊变量$?

基本语法

  • $?:功能描述:
    • 最后一次执行的命令的返回状态。如果这个变量的值为0,证明上一个命令正确执行;如果这个变量的值为非0(具体是哪个数,由命令自己来决定),则证明上一个命令执行不正确了。

案例实操

判断helloworld.sh脚本是否正确执行

./helloworld.sh
hello world

echo $?
0

运算符

基本语法

  • \(((运算式))”或“\)[运算式]”
  • expr + , - , *, /, % 加,减,乘,除,取余
    • 注意:expr运算符间要有空格

案例实操

  • 计算3+2的值 expr 2 + 3

  • 计算3-2的值 expr 3 - 2

  • 计算(2+3)X4的值

    • expr一步完成计算
      
      expr `expr 2 + 3` \*4
      
    • 采用$[运算式]方式
      
      S=$[(2+3)*4]
      echo $S
      

条件判断

基本语言

  • [condition] (注意condition前后要有空格)
    • 注意:条件非空即为true,[ atguigu ]返回true,[] 返回false。

常用判断条件

  • 两个整数之间比较
    • =字符串比较
      • -lt 小于(less than)
      • -le 小于等于(less equal)
      • -eq 等于(equal)
      • -gt 大于(greater than)
      • -ge 大于等于(greater equal)
      • -ne 不等于(Not equal)
  • 按照文件权限进行判断
    • -r 有读的权限(read)
    • -w 有写的权限(write)
    • -x 有执行的权限(execute)
  • 按照文件类型进行判断
    • -f 文件存在并且是一个常规的文件(file)
    • -e 文件存在(existence)
    • -d 文件存在并是一个目录(directory)

案例实操

  • 23是否大于等于22 [23 -ge 22 ]
  • helloworld.sh是否具有写权限 [ -w helloworld.sh ]
  • /home/atguigu/cls.txt目录中的文件是否存在 [ -e /home/atguigu/cls.txt]
  • 多条件判断(&& 表示前一条命令执行成功时,才执行后一条命令,|| 表示上一条命令执行失败后,才执行下一条命令)
    • [ condition ] && echo OK || echo notok

流程控制(重点)

if判断

基本语法

if[条件判断式];then
	程序
fi

#或者
if[条件判断式]
	then
		程序
fi
注意事项:
[条件判断式],中口号和条件判断式之间必须有空格
if后要有空格

案例实操

输入一个数字,如果是1,则输出banzhang zhen shuai,如果是2,则输出cls zhen mei,如果是其它,什么也不输出。

touch if.sh
vim if.sh

#输入脚本内容
#!/bin/bash
if[ "1" -eq $1 ]
then
	echo "banzhang zhen shuai"
elif[ $1 -eq "2" ]
then
	echo "cls zhen mei"
fi

chmod +x if.sh
./if.sh

case语句

基本语法

case $变量名 in 
  "值1") 
    如果变量的值等于值1,则执行程序1 
    ;; 
  "值2") 
    如果变量的值等于值2,则执行程序2 
    ;; 
  …省略其他分支… 
  *) 
    如果变量的值都不是以上的值,则执行此程序 
    ;; 
esac
注意事项:
1)case行尾必须为单词“in”,每一个模式匹配必须以右括号“)”结束。
2)双分号“;;”表示命令序列结束,相当于java中的break。
3)最后的“*)”表示默认模式,相当于java中的default。

案例实操

输入一个数字,如果是1,则输出banzhang,如果是2,则输出cls,如果是其他,输出renyao

touch case.sh
vim case.sh

#输入脚本内容
#!/bin/bash
case $1 in
	"1")
		echo "bangzhang"
		;;
	"2")
		echo "cls"
		;;
	*)
		echo "renyao"
		;;
esac

chmod a=x case.sh
./case.sh


注意事项:
1)case行尾必须为单词“in”,每一个模式匹配必须以右括号“)”结束。
2)双分号“;;”表示命令序列结束,相当于java中的break。
3)最后的“*)”表示默认模式,相当于java中的default。

for循环

基本语法1

for (( 初始值;循环控制条件;变量变化 )) 
  do 
    程序 
  done

案例实操

从1加到100

touch for1.sh
vim for1.sh

#输入脚本内容
#!bin/bash
s=0
for((i=1;i<=100;i++))
	do
		s=$[$s+$i]
	done
echo $s

chmod u+x for1.sh
./for1.sh

基本语法2

for 变量 in 值1 值2 值3… 
  do 
    程序 
  done

案例实操

  • 打印所有参数

    • touch for2.sh
      vim for2.sh
      
      #输入脚本内容
      #!/bin/bash
      #打印数字
      for i in $*
      	do
      		echo "$i"
      	done
      
      chmod 777 for2.sh
      bash for2.sh cls xz bd
      
  • 比较\(*和\)@

    • \(*和\)@都表示传递给函数或脚本的所有参数,不被双引号“”包含时,都以$1 \(2 …\)n的形式输出所有参数

      • [atguigu@hadoop101 datas]$ touch for.sh
        [atguigu@hadoop101 datas]$ vim for.sh
        
        #!/bin/bash 
        
        for i in $*
        do
              echo "ban zhang love $i "
        done
        
        for j in $@
        do      
                echo "ban zhang love $j"
        done
        
        [atguigu@hadoop101 datas]$ bash for.sh cls xz bd
        ban zhang love cls 
        ban zhang love xz 
        ban zhang love bd 
        ban zhang love cls
        ban zhang love xz
        ban zhang love bd
        
    • 当它们被双引号“”包含时,“$*”会将所有的参数作为一个整体,以“$1 \(2 …\)n”的形式输出所有参数;“$@”会将各个参数分开,以“$1” “\(2”…”\)n”的形式输出所有参数。

      • [atguigu@hadoop101 datas]$ vim for.sh
        
        
        #!/bin/bash 
        
        for i in "$*" 
        #$*中的所有参数看成是一个整体,所以这个for循环只会循环一次 
                do 
                        echo "ban zhang love $i"
                done 
        
        for j in "$@" 
        #$@中的每个参数都看成是独立的,所以“$@”中有几个参数,就会循环几次 
                do 
                        echo "ban zhang love $j" 
        done
        
        [atguigu@hadoop101 datas]$ chmod 777 for.sh
        [atguigu@hadoop101 datas]$ bash for.sh cls xz bd
        
        ban zhang love cls xz bd
        ban zhang love cls
        ban zhang love xz
        ban zhang love bd
        

while循环

基本语法

while[条件判断式]
	do
		程序
	done

案例实操

从1加到100

touch while.sh
vim while.sh

#输入脚本内容
s=0
i=1
while[ $i -le 100 ]
do
	s=$[$s+$i]
	i=$[$s+1]
done
echo $s

chmod 777 while.sh
./while.sh

read读取控制台输入

基本语法

  • read(选项)(参数)
    • 选项
      • -p:指定读取值时的提示符
      • -t:指定读取值时等待的时间(秒)
    • 参数
      • 变量:指定读取值的变量名

案例实操

提示7秒内读取控制台输入的名称

touch read.sh
vim read.sh

#脚本输入内容
#!/bin/bash
read -t 7 -p "Enter your name in 7 seconds" NAME
echo $NAME

./read.sh

函数

系统函数

basename基本语法

  • basename[string/pathname][suffix]

    • 功能描述:basename命令会删掉所有的前缀包括最后一个(‘/’)字符,然后将字符串显示出来。
    • 选项:
      • suffix为后缀,如果suffix被指定了,basename会将pathname或string中的suffix去掉。
  • 案例实操

    • 截取该/home/atguigu/banzhang.txt路径的文件名称

    • [atguigu@hadoop101 datas]$ basename /home/atguigu/banzhang.txt 
      banzhang.txt
      [atguigu@hadoop101 datas]$ basename /home/atguigu/banzhang.txt .txt
      banzhang
      

dirname基本语法

  • dirname 文件绝对路径

    • 功能描述:从给定的包含绝对路径的文件名中去除文件名(非目录的部分),然后返回剩下的路径(目录的部分)

    • 案例实操

    • 获取banzhang.txt文件的路径

    • [atguigu@hadoop101 ~]$ dirname /home/atguigu/banzhang.txt 
      /home/atguigu
      

自定义函数

基本语法

[ function ] funname[()]
{
	Action;
	[return int;]
}
funname

经验技巧

  • 必须在调用函数地方之前,先声明函数,shell脚本是逐行运行。不会像其它语言一样先编译
  • 函数返回值,只能通过$?系统变量获得,可以显示加:return返回,如果不加,将以最后一条命令运行结果,作为返回值。return后跟数值n(0-255)

案例实操

计算两个输入参数的和

touch fun.sh
vim fun.sh

#输入脚本内容
#!/bin/bash
function sum()
{
	s=0
	s = $[$1 + $2]
	echo $s
}
read -p "Input the number1:" n1;
read -p "Input the number2:" n2
sum $n1 $n2

chmod 777 fun.sh
./fun.sh

Shell工具

cut

cut的工作就是“剪”,具体的说就是在文件中负责剪切数据用的。cut 命令从文件的每一行剪切字节、字符和字段并将这些字节、字符和字段输出。

  • 基本用法

    • cut[选项参数] filename
      • 说明:默认分隔符是制表符
      • 选项参数说明:
        • -f:列号,提取第几列
        • -d:分隔符,按照指定分隔符分割列
  • 案例实操

    • 数据准备

      [atguigu@hadoop101 datas]$ touch cut.txt
      [atguigu@hadoop101 datas]$ vim cut.txt
      dong shen
      guan zhen
      wo  wo
      lai  lai
      le  le
      
    • 切割cut.txt第一列

      [atguigu@hadoop101 datas]$ cut -d " " -f 1 cut.txt 
      dong
      guan
      wo
      lai
      le
      
    • 切割cut.txt第二、三列

      [atguigu@hadoop101 datas]$ cut -d " " -f 2,3 cut.txt 
      shen
      zhen
       wo
       lai
       le
      
    • 在cut.txt文件中切割出guan

      [atguigu@hadoop101 datas]$ cat cut.txt | grep "guan" | cut -d " " -f 1
      guan
      
    • 选取系统PATH变量值,第2个“:”开始后的所有路径

      [atguigu@hadoop101 datas]$ echo $PATH
      /usr/lib64/qt-3.3/bin:/usr/local/bin:/bin:/usr/bin:/usr/local/sbin:/usr/sbin:/sbin:/home/atguigu/bin
      
      [atguigu@hadoop102 datas]$ echo $PATH | cut -d: -f 2-
      /usr/local/bin:/bin:/usr/bin:/usr/local/sbin:/usr/sbin:/sbin:/home/atguigu/bin
      
    • 切割ifconfig后打印的IP地址

      [atguigu@hadoop101 datas]$ ifconfig eth0 | grep "inet addr" | cut -d: -f 2 | cut -d" " -f1
      192.168.1.102
      

sed

sed是一种流编辑器,它一次处理一行内容。处理时,把当前处理的行存储在临时缓冲区中,称为“模式空间”,接着用sed命令处理缓冲区中的内容,处理完成后,把缓冲区的内容送往屏幕。接着处理下一行,这样不断重复,直到文件末尾。文件内容并没有改变,除非你使用重定向存储输出。

基本用法

  • sed[选项参数] 'command' filename

    • 选项:
      • -e:直接在指令列模式上进行sed的动作编辑,简单来说就是执行编辑命令
    • 命令功能描述
      • a:新增,a的后面可以接字符串,在下一行出现
      • d:删除
      • s:查找并替换
  • 案例实操

    • 数据准备

      [atguigu@hadoop102 datas]$ touch sed.txt
      [atguigu@hadoop102 datas]$ vim sed.txt
      dong shen
      guan zhen
      wo  wo
      lai  lai
      
      le  le
      
    • 将“mei mv”这个单词插入到set.txt第二行下,打印

      [atguigu@hadoop102 datas]$ sed '2a mei nv' sed.txt 
      dong shen
      guan zhen
      mei nv
      wo  wo
      lai  lai
      
      le  le
      [atguigu@hadoop102 datas]$ cat sed.txt 
      dong shen
      guan zhen
      wo  wo
      lai  lai
      
      le  le
      注意:文件并没有改变
      
    • 删除sed.txt文件所有包含wo的行

      [atguigu@hadoop102 datas]$ sed '/wo/d' sed.txt
      dong shen
      guan zhen
      lai  lai
      
      le  le
      
    • 将sed.txt文件中wo替换为ni

      [atguigu@hadoop102 datas]$ sed 's/wo/ni/g' sed.txt 
      dong shen
      guan zhen
      ni  ni
      lai  lai
      
      le  le
      
      • 注意:‘g’表示global,全部替换
    • 将sed.txt文件中的第二行删除并将wo替换为ni

      atguigu@hadoop102 datas]$ sed -e '2d' -e 's/wo/ni/g' sed.txt 
      dong shen
      ni  ni
      lai  lai
      
      le  le
      

awk

一个强大的文本分析工具,把文件逐行的读入,以空格为默认分隔符将每行切片,切开的部分再进行分析处理。

基本用法

  • awk[选项参数] ‘pattern1{action1} pattern2{action2...} filename’

    • pattern:表示AWK在数据中查找的内容

    • action:再找到匹配内容时所执行的一系列命令

    • 选项参数说明:

      • -F:制定输入文件折分隔符,也就是选中某个符号作为字段分隔符,即将每行文本文件划分为多个字段
      • -v赋值一个用户定义变量
    • 案例实操

      • 数据准备 [atguigu@hadoop102 datas]$ sudo cp /etc/passwd ./

      • 搜索passwd文件以root关键字开头的所有行,并输出该行的第7列。

        [atguigu@hadoop102 datas]$ awk -F: '/^root/{print $7}' passwd 
        /bin/bash
        
      • 搜索passwd文件以root关键字开头的所有行,并输出该行的第1列和第7列,中间以“,”号分割。

        [atguigu@hadoop102 datas]$ awk -F: '/^root/{print $1","$7}' passwd 
        root,/bin/bash
        
        注意:BEGIN 在所有数据读取行之前执行;END 在所有数据执行之后执行。
        
      • 显示/etc/passwd的第一列和第七列,以逗号分割,且在所有行前面添加列名user,shell在最后一行添加"dahaige,/bin/zuishuai"。

        [atguigu@hadoop102 datas]$ awk -F : 'BEGIN{print "user, shell"} {print $1","$7} END{print "dahaige,/bin/zuishuai"}' passwd
        user, shell
        root,/bin/bash
        bin,/sbin/nologin
        。。。
        atguigu,/bin/bash
        dahaige,/bin/zuishuai
        
        注意:BEGIN 在所有数据读取行之前执行;END 在所有数据执行之后执行。
        
      • 将passwd文件中的用户id增加数值1并输出

        [atguigu@hadoop102 datas]$ awk -v i=1 -F: '{print $3+i}' passwd
        1
        2
        3
        4
        
    • awk的内置变量

      • FILENAME:文件名

      • NR:已读的记录数

      • NF:浏览记录的域的个数(切割后,列的个数)

      • 案例实操

        • 统计passwd文件名,每行的行号,每行的列数

          [atguigu@hadoop102 datas]$ awk -F: '{print "filename:"  FILENAME ", linenumber:" NR  ",columns:" NF}' passwd 
          filename:passwd, linenumber:1,columns:7
          filename:passwd, linenumber:2,columns:7
          filename:passwd, linenumber:3,columns:7
          
        • 切割IP

          [atguigu@hadoop102 datas]$ ifconfig eth0 | grep "inet addr" | awk -F: '{print $2}' | awk -F " " '{print $1}' 
          192.168.1.102
          
        • 查询sed.txt中空行所在的行号

          [atguigu@hadoop102 datas]$ awk '/^$/{print NR}' sed.txt 
          5
          

sort

sort命令是在Linux里非常有用,它将文件进行排序,并将排序结果标准输出。

基本语法

  • sort(选项)(参数)

    • 选项
      • -n:按照数值的大小排序
      • -r:以相反的顺序来排序
      • -t:设置排序时所用的分隔字符
      • -k:指定需要排序的列
    • 参数:指定排序的文件列表
  • 案例实操

    • 数据准备:

      [atguigu@hadoop102 datas]$ touch sort.sh
      [atguigu@hadoop102 datas]$ vim sort.sh 
      bb:40:5.4
      bd:20:4.2
      xz:50:2.3
      cls:10:3.5
      ss:30:1.6
      
    • 按照“:”分割后的第三列倒序排序。

      [atguigu@hadoop102 datas]$ sort -t : -nrk 3  sort.sh 
      bb:40:5.4
      bd:20:4.2
      cls:10:3.5
      xz:50:2.3
      ss:30:1.6