04 2023 档案
摘要:Rebalance 分为有两种情况 leader partition Rebalance consumer group Rebalance 这里分别讨论两种 Rebalance 情况。 leader partition Rebalance 生产者和消费者客户端都是通过 Leader 进行读写操作。t
阅读全文
摘要:问题背景 生产者和消费者客户端都是通过 Leader 进行读写操作,所以 Leader 节点压力相对于来说比较大。运维过程有可能会出现。主机性能比较差的当 Leader 节点的话,会影响Kafka的性能。那么就涉及到重新选举 Leader 操作,将 Leader 落在预期主机上 问题现象 演示环境是
阅读全文
摘要:kafka并没有提供一个专门的脚本来支持副本的扩缩,不像kafka-topic.sh脚本一样,是可以扩分区的。想要对副本进行扩缩,只能是曲线救国了,利用kafka-reassign-partitions.sh来重新分配副本。 查看主题的详情 ./kafka-topics.sh --command-c
阅读全文
摘要:问题现象 原有的消费者消费不到数据 新加入消费者也是不消费数据 查看消费组的详情,抛出 The coordinator is not available. 异常信息 排除过程 根据以上三种现象,可以推断出是 协调器不可用 。推断出问题的原因,现在开始分析为什么会出现这个问题。 协调器分为:消费组协调
阅读全文