golang 热升级

需求场景

干净利落地升级正在运行的agent程序。适用于Devops团队。

目标：

• 不关闭现有连接：例如我们不希望关掉已部署的运行中的程序。但又想不受限制地随时升级服务。

• 新的进程要能够启动并替换掉旧的。

原理：

在基于Unix的操作系统中，signal(信号)是与长时间运行的进程交互的常用方法.

• SIGTERM: 优雅地停止进程

• SIGHUP: 重启/重新加载进程 (例如: nginx, sshd, apache)

如果收到SIGHUP信号，优雅地重启进程需要以下几个步骤:

1. 服务器要拒绝新的连接请求，但要保持已有的连接。

2. 启用新版本的进程

3. 将socket“交给”新进程，新进程开始接受新连接请求

4. 旧进程处理完毕后立即停止。

 

实现参考：

https://grisha.org/blog/2014/06/03/graceful-restart-in-golang/  beego的grace模块主要的思路来源也是参考这篇文章

https://www.oschina.net/translate/graceful-server-restart-with-go

https://scalingo.com/articles/2014/12/19/graceful-server-restart-with-go.html

https://github.com/tim1020/godaemon

https://tomaz.lovrec.eu/posts/graceful-server-restart/  优雅的重新启动Golang web 服务

 

注意

1、实现后的agent程序，一般都是注册在systemd中（centos 7），我们准备的xxx.service文件需要指明PIDFile，这样在进行kill -HUP <server pid>时不会导致因systemd探测产生进程启动失败。

2、程序自支持kill -HUP，可以在代码中实现，通过这个方式这样可以通过控制台端随意的升级哪台agent。

升级步骤：

1. 调用agent端接口，发送升级指令
2. agent版本下载
3. agent备份、替换程序包
4. 执行kill -HUP
5. 完成自升级