随笔分类 - kafka
摘要:摘抄自:https://zhuanlan.zhihu.com/p/147054382 一、写入数据 1、顺序写入 2、Memory Mapped Files 二、读取数据 1、基于sendfile实现Zero Copy 2、批量压缩 三、总结 《Java 2019 超神之路》 《Dubbo 实现原理
阅读全文
摘要:摘抄自:https://zhuanlan.zhihu.com/p/354772550 Kafka存在丢消息的问题,消息丢失会发生在Broker,Producer和Consumer三种。 Broker Broker丢失消息是由于Kafka本身的原因造成的,kafka为了得到更高的性能和吞吐量,将数据异
阅读全文
摘要:摘抄自:https://blog.csdn.net/weixin_42494845/article/details/111408725 kafka的Consumer均衡算法在说顺序性这个问题之前,我们要先搞明白的是消费者是怎么消费分区上的数据。我们这里不详细讨论该算法,这不是本文的重点。简单的说:
阅读全文