摘要: Kafka 架构简介 Kafka是一个开源的、分布式的、可分区的、可复制的基于日志提交的发布订阅消息系统。它具备以下特点: ·消息持久化: 为了从大数据中获取有价值的信息,任何信息的丢失都是负担不起的。Kafka使用了O(1)的磁盘结构设计,这样做即便是在要存储大体积的数据时也是可以提供稳定的性能。 阅读全文
posted @ 2018-01-11 16:07 海东青Lo 阅读(604) 评论(0) 推荐(0) 编辑
摘要: 1、一旦消费者的数量超过分区的数量,新消费者将不会接收任何进一步的消息,直到现有消费者取消订阅任何一个消费者。 出现这种情况是因为Kafka中的每个消费者将被分配至少一个分区,并且一旦所有分区被分配给现有消费者,新消费者将必须等待。一个consumer可以消费多个partitions的消息。 2、  阅读全文
posted @ 2018-01-11 14:49 海东青Lo 阅读(124) 评论(0) 推荐(0) 编辑