摘要: 一、增加patition数量, 有多少个patition就会启多少个消费者线程去消费,跟消费者服务节点的数量无关,只能patition有关。 二、patition一样的情况下,改为批量消费,一次拉取多条数据,max.poll.records,利用多线程去处理数据,避免单线程处理批量数据时间过长,导致 阅读全文
posted @ 2023-12-09 17:40 guoyu1 阅读(945) 评论(0) 推荐(0) 编辑
摘要: https://zhuanlan.zhihu.com/p/459610418 Kafka 到底会不会丢数据呢?如果丢数据,究竟该怎么解决呢? 只有掌握了这些, 我们才能处理好 Kafka 生产级的一些故障,从而更稳定地服务业务。 认真读完这篇文章,我相信你会对Kafka 如何解决丢数据问题,有更加深 阅读全文
posted @ 2023-12-09 16:43 guoyu1 阅读(43) 评论(0) 推荐(0) 编辑