摘要: 应用程序使用 KafkaConsumer 向 Kafka 订阅主题,并从订阅的主题上接收消息。 一、消费者和消费者群组 Kafka 消费者从属于消费者群组。一个群组里的消费者订阅的是同一个主题,每个消费者接收主题一部分分区的消息。 假设主题T1有4个分区,消费者C1是群组G1里的唯一的消费者,消费者 阅读全文
posted @ 2021-10-18 22:40 湮天霸神666 阅读(287) 评论(0) 推荐(0) 编辑
摘要: 一、向Kafka发送消息的主要步骤 我们从创建一个 ProducerRecord 对象开始,ProducerRecord对象需要包含目标主题和要发送的内容。我们还可以指定键或分区。在发送 ProducerRecord对象时,生产者要先把键和值对象序列化成字节数组,这样它们才能够在网络上传输 。 接下 阅读全文
posted @ 2021-10-18 09:28 湮天霸神666 阅读(203) 评论(0) 推荐(0) 编辑
摘要: 一个典型的 Kafka 体系架构包括若干 Producer、若干 Broker、若干 Consumer,以及一个ZooKeeper集群。其中ZooKeeper是Kafka用来负责集群元数据的管理、控制器的选举等操作的。Producer将消息发送到Broker,Broker负责将收到的消息存储到磁盘中 阅读全文
posted @ 2021-10-18 08:48 湮天霸神666 阅读(165) 评论(0) 推荐(0) 编辑