kafka offset的存储问题
摘要:注意:从kafka-0.9版本及以后,kafka的消费者组和offset信息就不存zookeeper了,而是存到broker服务器上,所以,如果你为某个消费者指定了一个消费者组名称(group.id),那么,一旦这个消费者启动,这个消费者组名和它要消费的那个topic的offset信息就会被记录在b
阅读全文
kafka查询topic属性含义
摘要:第一行,列出了topic的名称,分区数(PartitionCount),副本数(ReplicationFactor)以及其他的配置(Config.s) Leader:1 表示为做为读写的broker的编号 Replicas:表示该topic的每个分区在那些borker中保存 Isr:表示当前有效的b
阅读全文
在kafka/config/目录下面有3个配置文件参数说明(producer.properties。consumer.properties。server.properties)
摘要:(1).producer.properties:生产端的配置文件 (2).consumer.properties:消费端的配置文件 (3).server.properties:服务端的配置文件 Kafka日志管理器允许定制删除策略。目前的策略是删除修改时间在N天之前的日志(按时间删除),也可以使用另
阅读全文