摘要: [TOC] System Architecture 分布式系统需要解决:分配和管理在集群的计算资源、处理配合、持久和可访问的数据存储、失败恢复。Fink专注分布式流处理。 Components of a Flink Setup JobManager :接受application,包含StreamGr 阅读全文
posted @ 2018-12-15 14:19 justcodeit 阅读(51536) 评论(4) 推荐(3) 编辑
摘要: Kafka总结 [TOC] 什么是kafka:分布式流处理平台。主要三个特点:可以发布和订阅消息的系统;可容错且持久地存储流记录;流计算。通常使用前两个特征。 发布订阅信息系统一般规则 :消费者可订阅多个topic(消息队列),同一条数据可被多个消费者消费,消息被消费后不会被立刻删除。 概念 Bro 阅读全文
posted @ 2018-12-15 13:23 justcodeit 阅读(558) 评论(0) 推荐(0) 编辑