随笔分类 - kafka
记一次kafka消息积压的解决
摘要：背景 简化的系统拓扑图如下 问题 大量增加了传感器数量后,发现数据仓库里的数据入库有延迟了, 于是使用kafka自带的bin目录下的kafka-consumer工具查看一下消费者消息积压数量 [pmish@localhost bin]$ ./kafka-consumer-groups.sh --bo
阅读全文
kafka集群压力测试
摘要：1）Kafka压测 用Kafka官方自带的脚本，对Kafka进行压测。Kafka压测时，可以查看到哪个地方出现了瓶颈（CPU，内存，网络IO）。一般都是网络IO达到瓶颈。 kafka-consumer-perf-test.sh kafka-producer-perf-test.sh 2）Kafka
阅读全文
kafka集群启动脚本失效
摘要：问题描述: 之前写的kafka集群启动脚本,今天重启服务器后失效了, 只启动了本地的kafka1, 另一台虚拟机上的kafka2没启动也没有日志 #! /bin/bash case $1 in "start"){ echo " Start 10.168.204.158 Kafka Broker $j
阅读全文
kafka-eagle: 开源的kafka UI工具
摘要：https://blog.51cto.com/u_13626762/5220057
阅读全文
