第16章大数据定制篇-Shell编程
文章目录
16.1 为什么要学习Shell编程
- Linux 运维工程师在进行服务器集群管理时,需要编写Shell程序来进行服务器管理。
2)对于JavaEE和Python程序员来说,工作的需要,你的老大会要求你编写–些Shell脚本进行程序或者是服务器的维护,比如编写一个定时备份数据库的脚本。
3)对于大数据程序员来说,需要编写Shell程序来管理集群。
16.2 Shell是什么
Shell是一个命令行解释器,它为用户提供了一个向Linux内核发送请求以便运行程序的界面系统级程序,用户可以用Shell 来启动、挂起、停止甚至是编写- -些程序。看一个示意图
16.3 Shell 脚本的执行方式
16.3.1脚本格式要求
- 脚本以#!/bin/bash开头
2)脚本需要有可执行权限
16.3.2编写第一个Shell脚本
需求说明:创建一一个Shell脚本,输出hello world!
vim hello.sh
#!/bin/bash
echo "hello,world "
16.3.3脚本的常用执行方式
方式1(输入脚本的绝对路径或相对路径)
说明:首先要赋予helloworld.sh脚本的+x权限,再执行脚本
比如./hello.sh 或者使用绝对路径/root/shcode/hello.sh
方式 2(sh+脚本)
说明:不用赋予脚本+x权限,直接执行即可。
比如sh hello.sh, 也可以使用绝对路径
16.4Shell的变量
16.4.1 Shell变量介绍
- Linux Shell中的变量分为,系统变量和用户自定义变量。
2)系 统变量: H O M E 、 HOME、 HOME、PWD、 S H E L L 、 SHELL、 SHELL、USER等等,比如:
echo $HOME 等等…
3)显示 当前shell 中所有变量: set
16.4.2 shell变量的定义
基本语法
1)定义变量:变量名=值
2)撒销 变量: unset变量
3)声 明静态变量: readonly 变量,注意:不能 unset
快速入门
1)案例1:定义变量A
2)案例2:撤销变量A
3) 案例3:声明静态的变量B=2,不能 unset
16.4.3 shell变量的规范和含义
- 变量名称可以由字母、数字和下划线组成,但是不能以数字开头。5A=200(x)
2)等 号两侧不能有空格
3)变量名称- -般习惯为大写,这是一个规范, 我们遵守即可
将命令的返回值赋给变量
1) A='date’反引号,运行里面的命令,并把结果返回给变量A
*2) A= $(date) 等价于反引号
16.5设置环境变量
16.5.1基本语法
- export 变量名=变量值 (功能描述:将shell 变量输出为环境变量/全局变量)
2)source配置文件 (功能描述:让修改后的配置信息立即生效) - echo $变量名 (功能描述:查询环境变量的值)
16.5.2快速入门
1)在/etc/profile文件中定义TOMCAT_ HOME环境变量
2)查 看环境变量TOMCAT_ HOME的值
3)在另外一个shell程序中使用TOMCAT_ HOME
注意:在输出TOMCAT_ HOME环境变量前,需要让其生效。
source /etc/profile
16.6shell注释
#我是单行注释
我是多行注释
:<<!
A=100
B=200
C=300
!
16.7位置参数变量
16.7.1介绍
当我们执行一个shell脚本时,如果希望获取到命令行的参数信息,就可以使用到位置参数变量
比如: ./myshell.sh 100 200,这个就是一个执行shel1的命令行,可以在myshell脚本中 获取到参数信息
16.7.2基本语法
$n (功能描述: n为数字,$0代表命令本身,$1-$9代表第- - 到第九个参数,十以上的参数,十以上的参数需要用大括号包含,如${10})
$*(功能描述:这个变量代表命令行中所有的参数,$*把所有的参数看成一一个整体)
<$@(功能描述:这个变量也代表命令行中所有的参数,不过$@把每个参数区分对待)
$#(功能描述:这个变量代表命令行中所有参数的个数)
16.8预定义变量(了解)
16.8.1基本介绍
就是shell设计者事先已经定义好的变量,可以直接在shell脚本中使用
16.8.2基本语法
- $$(功能描述:当前进程的进程号(PID) )
- $! (功能描述:后台运行的最后一个进程的进程号(PID) )
- $? ( 功能描述:最后一次执行的命令的返回状态。如果这个变量的值为0,证明上一个命令正确执行;如果这个变量的值为非0 (具体是哪个数,由命令自己来决定) ,则证明上一个命令执行不正确了。)
16.8.3应用实例
在一个shell脚本中简单使用一下预定义变量
preVar.sh
#!/bin/bash
echo "当前执行的进程id- =$$"
#以后台的方式运行一一个脚本,并获取他的进程号
/root/shcode/myshell.sh &
echo "最后-一个后台方式运行的进程id=$!"
echo "执行的结果是=$?"
16.9运算符
16.9.1基本介绍
学习如何在shell中进行各种运算操作。
16.9.2基本语法
- “
(
(
运算式
)
)
”或“
((运算式))”或“
((运算式))”或“[运算式]”或者expr m + n //expression表达式
2)注意 expr运算符间要有空格,如果希望将expr 的结果赋给某个变量,使用 - exprm-n
- expr *,/, %乘,除,取余
16.9.3条件判断
判断语句
流程控制
case语句
for语句
while循环
16.10read读取控制台输入
16.10.1基本语法
read(选项)(参数)
选项:
-p:指定读取值时的提示符;
-t:指定读取值时等待的时间(秒),如果没有在指定的时间内输入,就不再等待了。。
参数
变量:指定读取值的变量名
16.11系统函数
16.12自定义函数
16.13shell编程综合案例
16.13.1需求分析
- 每天凌晨2:30 备份数据库hspedu 到/data/backup/db
2)备份开始和备份结束能够给出相应的提示信息
3)备份后的文件要求以备份时间为文件名,并打包成.tar.gz 的形式,比如: 2021-03-12_ 230201.tar.gz
4)在备份的同时,检查是否有10天前备份的数据库文件,如果有就将其删除。
5)画一个思路分析图
准备好一张表