kafka分区数过多的弊端
摘要:上篇文章我们了解到,如果一个topic分区越多,理论上整个集群所能达到的吞吐量就越大。那么,分区数越多就越好吗?显然不是。今天我们来聊下kafka在分区数过多的情况下,会带来哪些弊端。 内存开销 客户端producer有个参数batch.size默认为16KB。它会为每个分区缓存消息,一旦批次数满了
阅读全文
posted @ 2021-05-27 11:01
posted @ 2021-05-27 11:01
posted @ 2021-05-11 14:38
posted @ 2021-05-10 22:15
posted @ 2021-05-10 21:34
posted @ 2021-05-08 10:32