12 2019 档案
记一次线上故障处理
摘要：前言 下面信息裁剪了一些，有的不确定了就拍脑袋定了，大体情况还是和实际相似。 整体过程 最开始接到告警 一个周六的 9:00 接到钉钉告警A应用线上 499 数量大量增加， A应用的背景介绍 先说下A应用的背景，我们A应用每天上亿次访问，主要是给别的厂商买接口的，按照各个厂商的调用量收钱，A 应用的
阅读全文
在 kubernetes 中部署两副本的 redis deployment 并且通过 prometheus 监控
摘要：前言 redis deployment 是 kubernetes 外面的 redis 从。prometheus 是通过 "redis exporter" 监控 redis 的。 redis exporter 和 redis 是部署在一个 pod 里面的。本文中用到的 prometheus opera
阅读全文
prometheus 自定义 webhook 发送告警到钉钉
摘要：prometheus 自定义 webhook 发送告警到钉钉 package main import ( "bytes" "encoding/json" "fmt" "log" "strings" "time" "io/ioutil" "net/http" ) const ( DingDingUrl
阅读全文
