2018年5月21日

Kafka Consumer API样例

摘要: Kafka Consumer API样例 1. 自动确认Offset 说明参照:http://blog.csdn.net/xianzhen376/article/details/51167333 说明: 1. bootstrap.servers 只是代表kafka的连接入口,只需要指定集群中的某一b 阅读全文

posted @ 2018-05-21 15:03 cxhfuujust 阅读(2192) 评论(0) 推荐(0) 编辑

关于kafka的新的group无法订阅到topic中历史消息的问题

摘要: 今天在写kafka的java api例子时候,遇到一个问题,比如我创建了一个test主题,往里面写了1,2,3,4,5条消息,在这个时候,我用一个新的group启动了一个消费者,发现该消费者只能读到5以后的消息,而1到5的消息是读不到的,于是感到疑惑,就去官网上找了一下,看到这这样一个配置项“aut 阅读全文

posted @ 2018-05-21 11:57 cxhfuujust 阅读(621) 评论(0) 推荐(0) 编辑

apache kafka系列之在zookeeper中存储结构

摘要: 1.topic注册信息 /brokers/topics/[topic] : 存储某个topic的partitions所有分配信息 Schema: { "version": "版本编号目前固定为数字1", "partitions": { "partitionId编号": [ 同步副本组brokerId 阅读全文

posted @ 2018-05-21 11:30 cxhfuujust 阅读(162) 评论(0) 推荐(0) 编辑

KafkaConsumer 长时间地在poll(long )方法中阻塞

摘要: 一,问题描述 搭建的用来测试的单节点Kafka集群(Zookeeper和Kafka Broker都在同一台Ubuntu上),在命令行下使用: 创建了一个3个分区的Topic如下:(Topic名称为 topicForTest) 使用 Console producer/consumer都能够正常地向to 阅读全文

posted @ 2018-05-21 11:29 cxhfuujust 阅读(2697) 评论(0) 推荐(0) 编辑

问题记录

摘要: 1.netty如何实现TCP长连? https://blog.csdn.net/u012052268/article/details/81545662 https://blog.csdn.net/u012052268/article/details/81545662 阅读全文

posted @ 2018-05-21 11:13 cxhfuujust 阅读(108) 评论(0) 推荐(0) 编辑

导航