随笔分类 -  BigData/Kafka

一个有意思的问题：Kafka的消费Offset会溢出吗
摘要：最近在项目上接入公司APP产品的用户点击日志数据时，发现消费者组的Offset值非常大，才一天的时间，已提交的Offset值就有千亿级别了。 于是不禁想了一个问题：假设一个Topic就只有一个Partition，每天产生数据量为100000000000（千亿）条，那是否会出现该分区下的消费Offse 阅读全文
posted @ 2022-10-14 00:18 nuccch 阅读(610) 评论(0) 推荐(0)