03 2023 档案
摘要：Kafka Rebalance： https://blog.csdn.net/lzxlfly/article/details/106246879 https://juejin.cn/post/7053811887955410981 kafka 监控 https://zhuanlan.zhihu.co
阅读全文
摘要：python依赖环境 sudo pip install kafka-python 如果没有 pip 命令，请安装 sudo yum install -y epel-release python2-pip consumer服务 import time from kafka import KafkaCo
阅读全文
摘要：需求场景分析 业务方反馈有 5 个要求： 每天请求量有3亿左右 QPS峰值大约在3万左右并发量 消息体平均不超过10k 副本最少2个 消息保留3天 一天总数据量：3亿请求 x 10k消息体 x 2个副本 = 6000000000kb ≈ 5722G ≈ 5.6T QPS峰值：30000qps Kaf
阅读全文
摘要：broker服务端 停止kafka cd /app/kafka/bin ./kafka-server-stop.sh 创建用户 # 获取zk连接信息 zk_conn=$(awk -F= '/^zookeeper.connect=/ {print $2}' /app/kafka/config/serv
阅读全文
摘要：背景：该zookeeper集群是给Kafka提供服务。zookeeper改造成sasl认证，Kafka集群需要添加连接zookeeper的账号密码。 zookeeper服务 停止服务 # 停止Kafka cd /app/kafka/bin ./kafka-server-stop.sh # 停止zoo
阅读全文
