第 17 章大数据定制篇-Shell 编程

第 17 章大数据定制篇-Shell 编程

目录

• 第 17 章大数据定制篇-Shell 编程
  • 17.1 为什么要学习Shell 编程
  • 17.2 Shell 是什么
  • 17.3 Shell 脚本的执行方式
    • 17.3.1 脚本格式要求
    • 17.3.2 编写第一个Shell 脚本
    • 17.3.3 脚本的常用执行方式
  • 17.4 Shell 的变量
    • 17.4.1 Shell 变量介绍
    • 174.2 shell 变量的定义
    • 17.4.3 shell 变量的定义
  • 17.5 设置环境变量
    • 17.5.1 基本语法
    • 17.5.2 快速入门
  • 17.6 位置参数变量
    • 17.6.1 介绍
    • 17.6.2 基本语法
    • 17.6.3 位置参数变量
  • 17.7 预定义变量
    • 17.7.1 基本介绍
    • 17.7.2 基本语法
    • 17.7.3 应用实例
  • 17.8 运算符
    • 17.8.1 基本介绍
    • 17.8.2 基本语法
    • 17.8.3 应用实例 oper.sh

17.1 为什么要学习Shell 编程

\1) Linux 运维工程师在进行服务器集群管理时，需要编写 Shell 程序来进行服务器管理。

\2) 对于 JavaEE 和 Python 程序员来说，工作的需要，你的老大会要求你编写一些 Shell 脚本进行程序或者是服务器的维护，比如编写一个定时备份数据库的脚本。

\3) 对于大数据程序员来说，需要编写 Shell 程序来管理集群

17.2 Shell 是什么

Shell 是一个命令行解释器，它为用户提供了一个向 Linux 内核发送请求以便运行程序的界面系统级程序，用户可以用 Shell 来启动、挂起、停止甚至是编写一些程序。看一个示意图

17.3 Shell 脚本的执行方式

17.3.1 脚本格式要求

\1) 脚本以#!/bin/bash 开头

\2) 脚本需要有可执行权限

17.3.2 编写第一个Shell 脚本

需求说明：创建一个 Shell 脚本，输出 hello world! vim hello.sh
#!/bin/bash
echo "hello,world~"

17.3.3 脚本的常用执行方式

方式 1(输入脚本的绝对路径或相对路径)
说明：首先要赋予 helloworld.sh 脚本的+x 权限， 再执行脚本比如	./hello.sh 或者使用绝对路径	/root/shcode/hello.sh
方式 2(sh+脚本)
说明：不用赋予脚本+x 权限，直接执行即可。比如	sh	hello.sh ,  也可以使用绝对路径

17.4 Shell 的变量

17.4.1 Shell 变量介绍

1)Linux Shell 中的变量分为，系统变量和用户自定义变量。
2)系统变量：$HOME、$PWD、$SHELL、$USER 等等，比如： echo $HOME	等等..
3)显示当前 shell 中所有变量：set

174.2 shell 变量的定义

基本语法
1)定义变量：变量名=值
2)撤销变量：unset 变量
3)声明静态变量：readonly 变量，注意：不能 unset

快速入门
1)案例 1：定义变量 A
2)案例 2：撤销变量 A
3)案例 3：声明静态的变量 B=2，不能 unset

#!/bin/bash
#案例 1：定义变量 A A=100
#输出变量需要加上$ echo A=$A
echo "A=$A"
#案例 2：撤销变量 A unset A
echo "A=$A"
#案例 3：声明静态的变量 B=2，不能 unset readonly B=2
echo "B=$B" #unset B
#将指令返回的结果赋给变量
:<<!
C=`date` D=$(date) echo "C=$C" echo "D=$D"
!
#使用环境变量 TOMCAT_HOME
echo "tomcat_home=$TOMCAT_HOME"

\1) 案例 4：可把变量提升为全局环境变量，可供其他 shell 程序使用[该案例后面讲]

17.4.3 shell 变量的定义

定义变量的规则
1)变量名称可以由字母、数字和下划线组成，但是不能以数字开头。5A=200(×)
2)等号两侧不能有空格
3)变量名称一般习惯为大写， 这是一个规范，我们遵守即可

将命令的返回值赋给变量
1)A=`date`反引号，运行里面的命令，并把结果返回给变量 A
2)A=$(date) 等价于反引号

17.5 设置环境变量

17.5.1 基本语法

1)export 变量名=变量值 （功能描述：将 shell 变量输出为环境变量/全局变量）
2)source 配置文件	（功能描述：让修改后的配置信息立即生效）
3)echo $变量名	（功能描述：查询环境变量的值）
4)示意

17.5.2 快速入门

1)在/etc/profile 文件中定义 TOMCAT_HOME 环境变量
2)查看环境变量 TOMCAT_HOME 的值
3)在另外一个 shell 程序中使用 TOMCAT_HOME
注意：在输出 TOMCAT_HOME 环境变量前，需要让其生效
source /etc/profile

shell 脚本的多行注释

:<<! 内容 !

17.6 位置参数变量

17.6.1 介绍

当我们执行一个 shell 脚本时，如果希望获取到命令行的参数信息，就可以使用到位置参数变量

比如 ： ./myshell.sh 100 200 , 这个就是一个执行 shell 的命令行，可以在 myshell 脚本中获取到参数信息

17.6.2 基本语法

$n （功能描述：n 为数字，$0 代表命令本身，$1-$9 代表第一到第九个参数，十以上的参数，十以上的参数需要用大括号包含，如${10}）
$* （功能描述：这个变量代表命令行中所有的参数，$*把所有的参数看成一个整体）
$@（功能描述：这个变量也代表命令行中所有的参数，不过$@把每个参数区分对待）
$#（功能描述：这个变量代表命令行中所有参数的个数）

17.6.3 位置参数变量

案例：编写一个 shell 脚本 position.sh ， 在脚本中获取到命令行的各个参数信息。

17.7 预定义变量

17.7.1 基本介绍

就是 shell 设计者事先已经定义好的变量，可以直接在 shell 脚本中使用

17.7.2 基本语法

\1) $$ （功能描述：当前进程的进程号（PID））

\2) $! （功能描述：后台运行的最后一个进程的进程号（PID））

\3) $？（功能描述：最后一次执行的命令的返回状态。如果这个变量的值为 0，证明上一个命令正确执行；如果这个变量的值为非 0（具体是哪个数，由命令自己来决定），则证明上一个命令执行不正确了。）

17.7.3 应用实例

在一个 shell 脚本中简单使用一下预定义变量

#!/bin/bash
echo "当前执行的进程 id=$$"
#以后台的方式运行一个脚本，并获取他的进程号
/root/shcode/myshell.sh &
echo "最后一个后台方式运行的进程 id=$!" echo "执行的结果是=$?"

17.8 运算符

17.8.1 基本介绍

学习如何在 shell 中进行各种运算操作。

17.8.2 基本语法

\1) “$((运算式))”或“$[运算式]”或者 expr m + n //expression 表达式

\2) 注意 expr 运算符间要有空格, 如果希望将 expr 的结果赋给某个变量，使用 ``

\3) expr m - n

\4) expr *, /, % 乘，除，取余

17.8.3 应用实例 oper.sh

案例 1：计算（2+3）X4 的值

案例 2：请求出命令行的两个参数[整数]的和 20 50

#!/bin/bash
#案例 1：计算（2+3）X4 的值#使用第一种方式RES1=$(((2+3)*4))
echo "res1=$RES1"
#使用第二种方式, 推荐使用
RES2=$[(2+3)*4]
echo "res2=$RES2"
#使用第三种方式 expr TEMP=`expr 2 + 3` RES4=`expr $TEMP \* 4` echo "temp=$TEMP"
echo "res4=$RES4"
#案例 2：请求出命令行的两个参数[整数]的和 20 50 SUM=$[$1+$2]
echo "sum=$SUM"

一些循环语句就不写了，浪费时间