golang 热升级
需求场景
干净利落地升级正在运行的agent程序。适用于Devops团队。
目标:
-
不关闭现有连接:例如我们不希望关掉已部署的运行中的程序。但又想不受限制地随时升级服务。
-
新的进程要能够启动并替换掉旧的。
原理:
在基于Unix的操作系统中,signal(信号)是与长时间运行的进程交互的常用方法.
-
SIGTERM: 优雅地停止进程
-
SIGHUP: 重启/重新加载进程 (例如: nginx, sshd, apache)
如果收到SIGHUP信号,优雅地重启进程需要以下几个步骤:
-
服务器要拒绝新的连接请求,但要保持已有的连接。
-
启用新版本的进程
-
将socket“交给”新进程,新进程开始接受新连接请求
-
旧进程处理完毕后立即停止。
实现参考:
https://grisha.org/blog/2014/06/03/graceful-restart-in-golang/ beego的grace模块主要的思路来源也是参考这篇文章
https://www.oschina.net/translate/graceful-server-restart-with-go
https://scalingo.com/articles/2014/12/19/graceful-server-restart-with-go.html
https://github.com/tim1020/godaemon
https://tomaz.lovrec.eu/posts/graceful-server-restart/ 优雅的重新启动Golang web 服务
https://zhuanlan.zhihu.com/p/59196185
注意
1、实现后的agent程序,一般都是注册在systemd中(centos 7),我们准备的xxx.service文件需要指明PIDFile,这样在进行kill -HUP <server pid>时不会导致因systemd探测产生进程启动失败。
2、程序自支持kill -HUP,可以在代码中实现,通过这个方式这样可以通过控制台端随意的升级哪台agent。
升级步骤:
- 调用agent端接口,发送升级指令
- agent版本下载
- agent备份、替换程序包
- 执行kill -HUP
- 完成自升级