运维与自动化系列③自动化部署基础与shell脚本实现_运维开发工程师需要编写脚本进行自动化部署(4)

于 2024-05-13 01:44:56 发布
阅读量351 收藏 8
点赞数 3
分类专栏： 程序员 文章标签： 运维 学习 面试
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_57259945/article/details/138775456
版权

最后的话

最近很多小伙伴找我要Linux学习资料，于是我翻箱倒柜，整理了一些优质资源，涵盖视频、电子书、PPT等共享给大家！

资料预览

给大家整理的视频资料：

给大家整理的电子书资料：

如果本文对你有帮助，欢迎点赞、收藏、转发给朋友，让我有持续创作的动力！

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化的资料的朋友，可以点击这里获取！

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！

2.2：编写shell脚本：
2.2.1：完成框架编写：

#!/bin/bash

#shell env
SHELL\_NAME="deploy.sh"
SHELL\_DIR="/home/www/" # 脚本路径
SHELL\_LOG="${SHELL\_DIR}/${SHELL\_NAME}.log" # 脚本执行日志

# code env 代码变量
CODE\_DIR="/deploy/code/deploy" # 代码目录
CONFIG\_DIR="/deploy/config" # 配置文件目录
TMP\_DIR="/deploy/tmp" # 临时目录
TAR\_DIR="/deploy/tar" # 打包目录
LOCK\_FILE="/tmp/deploy.lock" # 锁文件标示

# 使用帮助函数
usage(){ 
 echo $"Usage: $0 [ deploy | rollback ]"
}

shell\_lock(){
 touch ${LOCK\_FILE}
}

shell\_unlock(){
 rm -f ${LOCK\_FILE}
}

code\_get(){
 echo "code\_get"
    sleep 60
}

code\_build(){
 echo "code\_build"
}

code\_config(){
 echo "code\_config"
}

code\_tar(){
 echo "code\_tar"
}

code\_scp(){
 echo "code\_scp"
}

cluster\_node\_remove(){
 echo "cluster\_node\_remove"
}

code\_deploy(){
 echo "code\_deploy"
}

config\_diff(){
 echo "config\_diff"
}

code\_test(){
 echo "code\_test"
}

cluster\_node\_in(){
 echo "cluste\_node\_in"
}

rollback(){
 echo "rollback"
}

# 主函数
main(){ 
 if [ -f $LOCK_FILE ];then # 先判断锁文件在不在
 echo "Deploy is running" && exit 10; # 如果有锁文件直接退出
 fi 
 DEPLOY\_METHOD=$1 # 避免出错误将脚本的第一个参数作为变量
 case $DEPLOY_METHOD in
 deploy) # 如果第一个参数是deploy就执行以下操作
 shell\_lock; # 执行部署之前创建锁，如果同时有其他人执行则提示锁文件存在避免冲突
 code\_get;
 code\_build;
 code\_config;
 code\_tar;
 code\_scp;
 cluster\_node\_remove;
 code\_deploy;
 config\_diff;
 code\_test;
 cluster\_node\_in;
 shell\_unlock;
 ;;
 rollback) # 如果第一个参数是rollback就执行以下操作
 shell\_lock; # 回滚之前也是先创建锁文件
 rollback; # 执行完成删除锁文件
 shell\_unlock;
 ;;
 *) # 其他输入执行以下操作
 usage;
 esac
}
# 执行主函数并把第一个变量当参数
main $1

2.2.2：完成脚本：实现代码部署、测试、回滚等操作：

代码回滚设计：
正常回滚是回滚已经在web服务器部署过的版本，因此就不需要获取代码打包和部署的过程了

列出回滚版本
将模板服务器移除集群
执行回滚
重启和测试
将模板服务器加入集群

#!/bin/bash

#Dir List 部署节点(即部署节点需要做的操作)
# mkdir -p /deploy/code/web-demo
# mkdir -p /deploy/config/web-demo/base
# mkdir -p /deploy/config/web-demo/other
# mkdir /deploy/tmp
# mkdir /deploy/tar

# chown -R www.www /deploy
# chown -R www.www /webroot
# chown -R www.www /opt/webroot/
# chown -R www.www /webroot

# 需要在客户端节点做的操作
# mkdir /opt/webroot
# mkdir /webroot
# chown -R www.www /webroot
# chown -R www.www /opt/webroot/
# chown -R www.www /webroot
# [www@ ~]$ touch /webroot/web-dem


# Node List 服务器节点
PRE\_LIST="192.168.3.12" # 预生产节点
GROUP1\_LIST="192.168.3.12 192.168.3.13"
GROUP2\_LIST="192.168.3.13"
ROLLBACK\_LIST="192.168.3.12 192.168.3.13"

# 日志日期和时间变量
LOG\_DATE='date "+%Y-%m-%d"' # 如果执行的话后面执行的时间，此时间是不固定的，这是记录日志使用的时间
LOG\_TIME='date "+%H-%M-%S"'

# 代码打包时间变量
CDATE=$(date "+%Y-%m-%d") # 脚本一旦执行就会取一个固定时间赋值给变量，此时间是固定的
CTIME=$(date +"%H-%M-%S")

# shell env 脚本位置等变量
SHELL\_NAME="deploy.sh" # 脚本名称
SHELL\_DIR="/home/www/" # 脚本路径
SHELL\_LOG="${SHELL\_DIR}/${SHELL\_NAME}.log" # 脚本执行日志文件路径

# code env 代码变量
PRO\_NAME="web-demo" # 项目名称的函数
CODE\_DIR="/deploy/code/web-demo" # 从版本管理系统更新的代码目录
CONFIG\_DIR="/deploy/config/web-demo" # 保存不同项目的配置文件，一个目录里面就是一个项目的一个配置文件或多个配置文件
TMP\_DIR="/deploy/tmp" # 临时目录
TAR\_DIR="/deploy/tar" # 打包目录
LOCK\_FILE="/tmp/deploy.lock" # 锁文件路径

usage(){ # 使用帮助函数
 echo $"Usage: $0 [ deploy | rollback [ list | version ]"
}

writelog(){ # 写入日志的函数
 LOGINFO=$1 # 将参数作为日志输入
 echo "${CDATE} ${CTIME} : ${SEHLL\_NAME} : ${LOGINFO}" >> ${SHELL\_LOG}
}

# 锁函数
shell\_lock(){
 touch ${LOCK\_FILE}
}

# 解锁函数
shell\_unlock(){
 rm -f ${LOCK\_FILE}
}

# 获取代码的函数
code\_get(){
 echo "code\_get"
 writelog code\_get
 cd $CODE\_DIR && echo "git pull" # 进入到代码目录更新代码，此处必须免密码更新，此目录仅用于代码更新不能放其他任何文件
 cp -rf ${CODE_DIR} ${TMP_DIR}/ # 临时保存代码并重命名，包名为时间+版本号，准备复制到web服务器
 API\_VER="123" # 版本号
}

code\_build(){ # 代码编译函数
 echo code\_build
}

code\_config(){ # 配置文件函数
 writelog code\_config
 /bin/cp -rf ${CONFIG_DIR}/base/\* ${TMP\_DIR}/"${PRO\_NAME}" # 将配置文件放在本机保存配置文件的临时目录，用于暂时保存代码项目
 PKG\_NAME="${PRO\_NAME}"\_"$API\_VER"\_"${CDATE}-${CTIME}" # 定义代码目录名称
 cd ${TMP\_DIR} && mv ${PRO\_NAME} ${PKG\_NAME} # 重命名代码文件为web-demo\_123-20170629-11-19-10格式
 
}

code\_tar(){ # 对代码打包函数
 writelog code\_tar
 cd ${TMP\_DIR} && tar czf ${PKG\_NAME}.tar.gz ${PKG\_NAME}
 writelog "${PKG\_NAME}.tar.gz" 
}

code\_scp(){ # 代码压缩包scp到客户端的函数
 writelog "code\_scp"
 for node in $PRE\_LIST;do # 循环服务器节点列表
 scp ${TMP\_DIR}/${PKG\_NAME}.tar.gz $node:/opt/webroot/ # 将压缩后的代码包复制到web服务器的/opt/webroot
 done

 for node in $GROUP1\_LIST;do # 循环服务器节点列表
 scp ${TMP\_DIR}/${PKG\_NAME}.tar.gz $node:/opt/webroot/ # 将压缩后的代码包复制到web服务器的/opt/webroot
 done
}


url\_test(){
 URL=$1
 curl -s --head $URL |grep '200 OK'
 if [ $? -ne 0 ];then
 shell\_unlock;
 writelog "test error" && exit;
 fi
}

cluster\_node\_add(){ #将web服务器添加至前端负载
 echo cluster\_node\_add
}

cluster\_node\_remove(){ # 将web服务器从集群移除函数(正在部署的时候应该不处理业务)
 writelog "cluster\_node\_remove"
}

pre\_deploy(){
 writelog "pre\_deploy"
 for node in ${PRE\_LIST};do # 循环预生产服务器节点列表
 cluster\_node\_remove ${node} # 部署之前将节点从前端负载删除
 echo "pre\_deploy, cluster\_node\_remove ${node}"
 ssh ${node} "cd /opt/webroot && tar zxf ${PKG\_NAME}.tar.gz" #分别到web服务器执行压缩包解压命令
 ssh ${node} "rm -f /webroot/web-demo && ln -s /opt/webroot/${PKG\_NAME} /webroot/web-demo" # 整个自动化的核心，创建软连接
 done
}

pre\_test(){ # 预生产主机测试函数
 for node in ${PRE\_LIST};do # 循环预生产主机列表
 curl -s --head http://${node}:9999/index.html | grep "200 OK" # 测试web界面访问
 if [ $? -eq 0 ];then # 如果访问成功
 writelog " ${node} Web Test OK!" # 记录日志
 echo " ${node} Web Test OK!"
 cluster\_node\_add ${node} # 测试成功之后调用添加函数把服务器添加至节点,
 writelog "pre,${node} add to cluster OK!" # 记录添加服务器到集群的日志
 else # 如果访问失败
 writelog "${node} test no OK" # 记录日志
 echo "${node} test not OK"
 shell\_unlock # 调用删除锁文件函数
 break # 结束部署
 fi
 done

}

group1\_deploy(){ # 代码解压部署函数
 writelog "group1\_code\_deploy"
 for node in ${GROUP1\_LIST};do # 循环生产服务器节点列表
 cluster\_node\_remove $node 
 echo "group1, cluster\_node\_remove $node"
 ssh ${node} "cd /opt/webroot && tar zxf ${PKG\_NAME}.tar.gz" # 分别到各web服务器节点执行压缩包解压命令
 ssh ${node} "rm -f /webroot/web-demo && ln -s /opt/webroot/${PKG\_NAME} /webroot/web-demo" # 整个自动化的核心，创建软连接
 done
 scp ${CONFIG\_DIR}/other/192.168.3.13.server.xml 192.168.3.13:/webroot/web-demo/server.xml # 将差异项目的配置文件scp到此web服务器并以项目结尾
} 

group1\_test(){ # 生产主机测试函数
 for node in ${PRE\_LIST};do # 循环生产主机列表
 curl -s --head http://${node}:9999/index.html | grep "200 OK" #测试web界面访问
 if [ $? -eq 0 ];then #如果访问成功
 writelog " ${node} Web Test OK!" #记录日志
 echo "group1\_test,${node} Web Test OK!"
 cluster\_node\_add
 writelog " ${node} add to cluster OK!" #记录将服务器 添加至集群的日志
 else #如果访问失败
 writelog "${node} test no OK" #记录日志
 echo "${node} test no OK"
 shell\_unlock # 调用删除锁文件函数
 break # 结束部署
 fi
 done
}

rollback\_fun(){ 
 for node in $ROLLBACK\_LIST;do # 循环服务器节点列表
 # 注意一定要加"号，否则无法在远程执行命令
 ssh $node "rm -f /webroot/web-demo && ln -s /opt/webroot/$1 /webroot/web-demo" # 立即回滚到指定的版本，$1即指定的版本参数
 echo "${node} rollback success!"
 done
}

rollback(){ # 代码回滚主函数
 if [ -z $1 ];then
 shell\_unlock # 删除锁文件
 echo "Please input rollback version" && exit 3;
 fi
 case $1 in # 把第二个参数做当自己的第一个参数 
 list)
 ls -l /opt/webroot/\*.tar.gz
 ;;
 \*)
 rollback\_fun $1
 esac
 
}

main(){
 if [ -f $LOCK\_FILE ] ;then # 先判断锁文件在不在,如果有锁文件直接退出
 echo "Deploy is running" && exit 10
 fi
 DEPLOY\_METHOD=$1 # 避免出错误将脚本的第一个参数作为变量
 ROLLBACK\_VER=$2
 case $DEPLOY\_METHOD in
 deploy) # 如果第一个参数是deploy就执行以下操作
 shell\_lock; # 执行部署之前创建锁。如果同时有其他人执行则提示锁文件存在
 code\_get; # 获取代码
 code\_build; # 如果要编译执行编译函数
 code\_config; # cp配置文件
 code\_tar; # 打包
 code\_scp; # scp到服务器
 pre\_deploy; # 预生产环境部署
 pre\_test; # 预生产环境测试
 group1\_deploy; # 生产环境部署
 group1\_test; # 生产环境测试
 shell\_unlock; # 执行完成后删除锁文件
 ;;
 rollback) # 如果第一个参数是rollback就执行以下操作
 shell\_lock; # 回滚之前也是先创建锁文件
 rollback $ROLLBACK\_VER;
 shell\_unlock; # 执行完成删除锁文件
 ;;
 \*)
 usage;
 esac
}
main $1 $2

3.通过刚才编写的shell脚本将html官网页面部署到nginx中

①将代码上传到部署节点的/deploy/code/web-demo目录中

[www@master web-demo]$ pwd
/deploy/code/web-demo
[www@master web-demo]$ ll
total 20
drwxr-xr-x 6 www www 4096 Jun 6 13:46 assets
-rw-r--r-- 1 www www 1150 Jun 6 17:59 favicon.ico
drwxr-xr-x 2 www www 4096 Jun 6 15:32 images
-rw-r--r-- 1 www www 4323 Jun 6 16:19 index.html

最后的话

最近很多小伙伴找我要Linux学习资料，于是我翻箱倒柜，整理了一些优质资源，涵盖视频、电子书、PPT等共享给大家！

资料预览

给大家整理的视频资料：

给大家整理的电子书资料：

如果本文对你有帮助，欢迎点赞、收藏、转发给朋友，让我有持续创作的动力！

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化的资料的朋友，可以点击这里获取！

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！

资料预览

给大家整理的视频资料：

[外链图片转存中…(img-t8RQUkTX-1715535873374)]

给大家整理的电子书资料：

[外链图片转存中…(img-QBzhTTxW-1715535873374)]

如果本文对你有帮助，欢迎点赞、收藏、转发给朋友，让我有持续创作的动力！

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化的资料的朋友，可以点击这里获取！

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！

v_648374
关注
  • 3
    点赞
  • 踩
  • 8
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
VMware 虚拟机安装Mac OS系统
2301_78077767的博客
07-03 1万+
VMware 虚拟机安装Mac OS系统 VMware虚拟机、解锁工具(Unlocker系列) + Mac OS 10.15版本系列镜像
在VMware上安装macOS
CGydicjxy的博客
12-24 3989
选择macOS版本，小编为了方便，就选择10.13的版本。文末的镜像我会提供10.13，12，13的版本，大家根据实际需求选择。下一步要注意，网络一定要关，否则安装界面会卡在16分钟。此时在虚拟机内，右击桌面上的光盘，选择“推出······”，便可安装vmTloos。打开目录后，把后缀名为.vmx的文件用记事本打开，在最后添加这样一串代码，保存。vmTloos软件包脚本可能会被拦截，在设置里面允许，再重新安装。开启之前，先要检查cpu虚拟化有没有开启，检查方式如下图。点击中国，选择接近你家的城市，继续。
VM虚拟机怎么安装mac os？（全教程）
qq_64039239的博客
06-26 3万+
windows上的虚拟机安装mac 13，保姆级教程
Oracle11g安装配置详细教程
云哥的博客
09-26 6万+
本文中主要介绍oracle11g服务端与客户端工具的安装与配置
Oracle11g安装详细步骤（图文教程）
柯晓楠
06-07 3万+
Oracle11g是J2EE初学者必学的数据库之一，下面就给大家介绍一下Oracle11g数据库的详细安装步骤。第一步：打开Oracle中文官网下载Oracle11g 打开Oracle中文官网 点击导航中的下载，找到数据库下载链接 打开链接后，选择同意协议选项，并在下方找到Oracle11g的下载列表 选择对应的版本进行下载，需要将File1和File2两个文件都下载下来 第二步：解压文件，以
oracle 11g的详细安装过程
qq_44969527的博客
04-08 4762
这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入 欢迎使用Ma...
macOS虚拟机安装全过程（VMware）
热门推荐
Copcin的小站
02-13 13万+
​1. 安装前的准备 VMware Workspace 16 Pro要准备好，如果没有见我之前写的博客的前半部分； 还有百度网盘，链接：百度网盘下载链接。 2. 下载macOS镜像 这里提供3个版本的macOS镜像，越往下版本越新，下文以macOS Big Sur 11举例 macOS EI Captian 10.11：https://pan.baidu.com/s/1fagJkrFqq4FKA_HSB9Xhcgpwd=rvwz 此系统适合配置较低的Windows XP、Windows 7老电脑..
使用脚本实现系统自动化运维.pdf
10-15
总的来说，系统自动化运维脚本的编写是一项综合性的技能，需要结合对操作系统、网络、数据库等多方面知识的理解。通过不断学习和实践，运维人员可以掌握编写高效、可靠的自动化脚本，实现系统的高效管理和运维。
oracle数据库自动化部署shell脚本
03-10
适合dba用于oracle数据库的快速部署，可以自动部署oracle11g以上的数据库，并且支持rac的自动化部署，shell脚本里面有各项脚本参数说明，小白也能轻轻松松使用。
运维 - Bash Shell 脚本编程及系统大规模自动化运维教程合集.zip
最新发布
01-31
在IT行业中，Bash Shell脚本编程是系统管理员和运维工程师不可或缺的技能，尤其是在进行大规模自动化运维时。这个“运维 - Bash Shell 脚本编程及系统大规模自动化运维教程合集.zip”包含了丰富的学习资源，旨在帮助...
自动化部署ElasticSearch Shell脚本
01-04
它的部署过程涉及多个步骤，包括环境配置、下载安装包、配置参数、启动服务等，手动操作容易出错，因此利用Shell脚本进行自动化部署显得尤为重要。 Shell脚本是Linux/Unix系统中的一种强大工具，可以编写一系列命令...
Bash Shell 脚本编程及系统大规模自动化运维教程合集.zip
01-31
本教程合集针对Bash Shell脚本编程和系统大规模自动化运维进行了深入讲解，对于提升运维效率和管理水平具有显著价值。 首先，了解Bash的基础语法是至关重要的。这包括变量声明、条件语句（if-else）、循环结构（for...
如何在VMware虚拟机上安装运行Mac OS系统（详细图文教程）
iriczhao的博客
02-12 1万+
如何在VMware虚拟机上安装运行Mac OS系统。
Oracle完整安装详解
m0_51613816的博客
10-24 5万+
Oracle安装详细介绍
Oracle 11g图解安装方法
xdpcxq1029的博客
03-14 4793
xp用户可以在我的电脑右击-->管理-->服务和应用程序-->服务，找到所有以oracle开头的服务，右击，关闭。建议：删除PATH环境变量中关于Oracle的值时，将该值全部拷贝到文本编辑器中，找到对应的Oracle的值，删除后，再拷贝修改的串，粘贴到PATH环境变量中，这样相对而言比较安全。）隔开的，删除时注意。删除该路径下的所有以oracle开始的服务名称，这个键是标识Oracle在windows下注册的各种服务！7，下图选择语言，如果数据库内没有用到其他的语言，就这样默认的就可以了，下一步。
【VMware】VMware 安装 macOS虚拟机
A1_3_9_7的博客
01-20 2427
在开始在 VMware Workstation Pro 17 中安装 macOS 之前，确保您已准备好以下工具和环境。unlock.exeVMware Workstation Pro 无法自动检测 macOS 类型，因此选择“我稍后再安装操作系统”无需更改任何内容，只需点击“擦除”至此，您已成功在 Windows 计算机上通过 VMware Workstation Pro 安装并体验 macOS 的魅力。
oracle11g安装步骤
qq_73420934的博客
12-05 3325
oracle安装过程
rpm方式离线安装
qq_45497146的博客
01-05 6315
本教程适用于所有通过yum源能够下载的软件及命令
linux 中swap 原理简介
私房菜
11-22 9681
1.什么是swap 从功能上讲，交换分区主要是在内存不够用的时候，将部分内存上的数据交换到 swap空间上，以便让系统不会因内存不够用而导致oom或者更致命的情况出现。 也就是说，当内存不够用时，我们使用 swap 分区来临时顶替。这种“拆东墙，补西墙”的方式应用于几乎所有的操作系统中。 使用 swap 交换分区，显著的优点是，通过操作系统的调度，应用程序实际可以使用的内存空间将远远超过系统的物理内存。由于硬盘空间的价格远比 RAM 要低，因此这种方式无疑是经济实惠的。当然，频繁地读写硬盘，会显著降.
Shell自动化运维：基础与脚本编写
SHELL脚本可以实现一系列复杂任务的自动化，包括系统管理、数据处理、文件操作等。 1. SHELL类型与理解： - 不同类型的SHELL有不同的特性和功能。例如，Bourne Shell (sh) 是最早的UNIX SHELL，而Bourne-Again ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值