【故障公告】新版博客后台部署时的配置问题引发故障
最近,我们对新版博客后台(Angular 8.2.7 + .NET Core 3.0)进行了灰度发布,如果您访问博客后台时跳转到 https://i-beta.cnblogs.com/ ,说明使用的就是新版博客后台。
今天我们在一次基于 gitlab-ci 的自动化发布过程中,由于操作问题在发布前没有对 appsettings.Production.json 的修改进行保存,造成容器在启动时使用了旧版的配置文件,再加上容器的健康检查不能检查出这种不正常情况(这个地方的改进还没完成),最不该的是在发布后没有对关键功能进行测试验证以及值班人员没有及时处理用户反馈,从而造成 18:22~19:27 期间使用新版博客后的用户无法正常发布博文,非常抱歉由此给您带来了麻烦,请您谅解。
我们会吸取教训,并采取以下改进措施:
- 更高优先级改进健康检查。一是容器的健康检查,二是阿里云云监控的健康检查。当关键功能不可用时,让健康检查失败(之前的健康检查没有对业务功能进行检查)。这样发布时如果出现问题,容器健康检查失败,docker swarm 就不会部署新容器。当正在运行的容器出现问题影响关键功能的使用时及时报警。
- 尽可能实现在生产环境发布后用“机器人”对关键功能进行测试验证。
- 每次自动化发布时在值班群发消息通知值班人员留意用户反馈。
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】凌霞软件回馈社区,博客园 & 1Panel & Halo 联合会员上线
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】博客园社区专享云产品让利特惠,阿里云新客6.5折上折
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· .NET Core 托管堆内存泄露/CPU异常的常见思路
· PostgreSQL 和 SQL Server 在统计信息维护中的关键差异
· C++代码改造为UTF-8编码问题的总结
· DeepSeek 解答了困扰我五年的技术问题
· 为什么说在企业级应用开发中,后端往往是效率杀手?
· 2分钟学会 DeepSeek API,竟然比官方更好用!
· .NET 使用 DeepSeek R1 开发智能 AI 客户端
· autohue.js:让你的图片和背景融为一体,绝了!
· 10亿数据,如何做迁移?
· 推荐几款开源且免费的 .NET MAUI 组件库
2016-11-14 上周热点回顾(11.7-11.13)
2011-11-14 上周热点回顾(11.7-11.13)