05 2017 档案

Streaming 101
摘要：开宗明义！本文根据Google Beam大神Tyler Akidau的系列文章《The world beyond batch: Streaming 101》(批处理之外的流式世界)整理而成， 主要讨论流式数据处理。在大数据领域，流式数据处理越发地重要了。原因有以下几点： 人们越来越想要得到更及时的数 阅读全文
posted @ 2017-05-22 09:42 huxihx 阅读(3985) 评论(2) 推荐(2) 编辑
Streaming 101
摘要：开宗明义！本文根据Google Beam大神Tyler Akidau的系列文章《The world beyond batch: Streaming 101》(批处理之外的流式世界)整理而成， 主要讨论流式数据处理。 在大数据领域，流式数据处理越发地重要了。原因有以下几点： 人们越来越想要得到更及时的 阅读全文
posted @ 2017-05-19 16:09 huxihx 阅读(634) 评论(0) 推荐(0) 编辑
Kafka 0.11版本新功能介绍 —— 空消费组延时rebalance
摘要：在0.11之前的版本中，多个consumer实例加入到一个空消费组将导致多次的rebalance，这是由于每个consumer instance启动的时间不可控，很有可能超出coordinator确定的rebalance timeout(即max.poll.interval.ms)，而每次rebal 阅读全文
posted @ 2017-05-06 22:45 huxihx 阅读(10114) 评论(13) 推荐(0) 编辑