摘要：
常问知识点 阅读全文
摘要：
1. 背景 绝大数事故发生在应用上下线发布阶段，所以要尽可能避免发布过程中由于应用自身代码问题对用户造成的影响。 业界发布规范： 可灰度（可以通过 Argo Rollout/OpenKruise 支持） 可观测（容器状态、容器速查大盘、发布/配置变更/K8s 事件、业务日志/业务埋点、jstack/ 阅读全文
摘要：
1. 什么是 HPA ? HPA（Horizontal Pod Autoscaler）是 Kubernetes 中的一种资源自动伸缩机制，用于根据某些指标动态调整 Pod 的副本数量。 2. 什么时候需要 HPA ？ 负载波动：当您的应用程序的负载经常发生波动时，HPA 可以自动调整 Pod 的副本 阅读全文
摘要：
1. 上价值 从虚拟机到 Kubernetes 转变的收益 更高效的利用系统资源：虚拟化本身大概占用10%的宿主机资源消耗，在集群规模足够大的时候，这是一块非常大的资源浪费。 保证环境的一致性：环境不一致问题是容器镜像出现之前业界的通用问题，不利于业务的快速上线和稳定性。 加快资源交付和扩缩容：虚拟 阅读全文
摘要：
1. 影响范围和故障时间线 影响范围 ... 影响时间线（2022-xx-xx xx:xx ~ 2022-xx-xx xx:xx） ... 2. 故障发生原因 故障现象 根因分析 ... 3. Why 分析 5 why 分析法 4. 后续 TODO 阅读全文
摘要：
问题：镜像仓库认证 secret 创建后，被 rancher 更新为 旧密码 解决方式：删除 项目id 相对应的namespace 下的 secret，停止自动同步更新 原因：之前 创建 镜像仓库凭证 是通过 rancher UI 创建，作用域为 项目下所有命令空间 排查思路： 查看 secrets 阅读全文
摘要：
Kubernetes中namespace有两种常见的状态，即Active和Terminating状态，其中Terminating状态一般会比较少见，当对应的命名空间下还存在运行的资源，但该命名空间被删除时才会出现所谓的Terminating状态，这种情况下只要等待Kubernetes本身将命名空间下 阅读全文
摘要：
Pod 驱逐场景总结 从一个 SRE 角度看， Pod 驱逐分为两种情况： 较安全驱逐 & 提高稳定性的良性驱逐 API 发起驱逐，典型案例：kubectl drain Node Not Ready 时，Controller Manager 发起的驱逐 有风险的驱逐 节点压力驱逐 节点磁盘空间不足、 阅读全文
摘要：
Etcd 磁盘空间爆满解决方案 etcd默认的空间配额限制为2G，超出空间配额限制就会影响服务，所以需要定期清理 设置环境变量 ETCD_CA_CERT="/etc/kubernetes/pki/etcd/ca.crt" ETCD_CERT="/etc/kubernetes/pki/etcd/ser 阅读全文
摘要：
目的 本次演练旨在测试 Kubernetes 的 etcd 高可用性，检验是否能够在其中一个 etcd 节点发生故障的情况下，其他 etcd 节点能够接管其工作，确保集群仍能正常运行。 集群架构 演练场景 在一个三节点的 Kubernetes 集群中，我们将模拟其中一个 etcd 节点的故障，观察剩 阅读全文