2021年6月15日

kafka消费者如何才能从头开始消费某个topic的全量数据

摘要： 消费者要从头开始消费某个topic的全量数据，需要满足2个条件（spring-kafka）： （1）使用一个全新的"group.id"（就是之前没有被任何消费者使用过）; （2）指定"auto.offset.reset"参数的值为earliest； 对应的spring-kafka消费者客户端配置参数 阅读全文

posted @ 2021-06-15 11:10 ExplorerMan 阅读(1492) 评论(0) 推荐(0) 编辑

kafka consumer消费者 offset groupID详解

摘要： kafka consumer：消费者可以从多个broker中读取数据。消费者可以消费多个topic中的数据。 因为Kafka的broker是无状态的，所以consumer必须使用partition offset来记录消费了多少数据。如果一个consumer指定了一个topic的offset，意味着该 阅读全文

posted @ 2021-06-15 11:07 ExplorerMan 阅读(1984) 评论(0) 推荐(0) 编辑

导航