摘要: 部署kafka-eagle 下载地址:https://github.com/smartloli/kafka-eagle-bin/archive/v3.0.1.tar.gz 官方文档地址:https://docs.kafka-eagle.org/ 依赖: 需要数据库和jdk环境来做数据的存储,可以参考 阅读全文
posted @ 2024-03-31 23:18 百因必有果 阅读(79) 评论(0) 推荐(0) 编辑
摘要: 部署logstash 下载地址:https://www.elastic.co/cn/downloads/past-releases/ (注意这里是跟elasticsearch版本一致) #创建目录 mkdir -p /home/work #解压到指定目录 tar -xvf logstash-7.17 阅读全文
posted @ 2024-03-31 22:49 百因必有果 阅读(77) 评论(0) 推荐(0) 编辑
摘要: 部署KAFKA集群 机器: eks-zk-kafka001 10.0.0.41 eks-zk-kafka002 10.0.0.42 eks-zk-kafka003 10.0.0.43 初始化单机环境 #关闭防火墙 systemctl disable --now firewalld systemctl 阅读全文
posted @ 2024-03-31 22:36 百因必有果 阅读(115) 评论(0) 推荐(0) 编辑
摘要: zookeeper eks-zk-kafka001 10.0.0.41 eks-zk-kafka002 10.0.0.42 eks-zk-kafka003 10.0.0.43 初始化单机环境 #关闭防火墙 systemctl disable --now firewalld systemctl dis 阅读全文
posted @ 2024-03-31 18:56 百因必有果 阅读(69) 评论(0) 推荐(0) 编辑
摘要: 部署elasticsearch7.17.3版本 背景: 业务有需求看evenet事件,由于etcd集群中的event key频繁打到200w+,对etcd集群压力非常大,每次都需要手动删除event key,非常耗时间,而且风险特别好,恢复时间慢等缺点。 解决方案: 1,拆分etcd集群中的even 阅读全文
posted @ 2024-03-27 19:50 百因必有果 阅读(348) 评论(0) 推荐(0) 编辑
摘要: 背景: 集群中的ds相关的服务,需要指定label的部署 package main import ( "bytes" "log" "os" "os/exec" "path/filepath" "strings" "time" ) const logFilePath = "test.log" func 阅读全文
posted @ 2024-03-10 23:11 百因必有果 阅读(6) 评论(0) 推荐(0) 编辑
摘要: 使用go写了一个简单的http接口 package main import ( "fmt" "net/http" "os/exec" "sync" "time" ) var ( requestCount int lastTimestamp time.Time mu sync.Mutex ) cons 阅读全文
posted @ 2024-03-08 15:45 百因必有果 阅读(74) 评论(0) 推荐(0) 编辑
摘要: 背景:因为公司中的机器比较老。我们的云上监控规定,使用的token的方式来监控,所以无法监控我们的etcd集群,我这里提供的一个etcd数据转发功能,能让监控到etcd集群 package main import ( "crypto/tls" "crypto/x509" "fmt" "io" "ne 阅读全文
posted @ 2024-03-05 13:33 百因必有果 阅读(7) 评论(0) 推荐(0) 编辑
摘要: 记录一下使用go写的一些脚本 package main import ( "encoding/json" "fmt" "log" "net/http" "os" "os/exec" "strconv" "strings" "sync" "time" ) var ( requestCount int 阅读全文
posted @ 2024-03-05 13:28 百因必有果 阅读(29) 评论(0) 推荐(0) 编辑
摘要: 查看apiserver 审计日志: grep '"code":504' audit-2023-01-05T02-53-58.676.log | grep -Po '(?<="requestURI":")[^"]*' | sort | uniq -c | sort -rn | head -n 100 阅读全文
posted @ 2023-12-14 19:07 百因必有果 阅读(13) 评论(0) 推荐(0) 编辑