会员
周边
众包
新闻
博问
闪存
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
HaiziS
博客园
首页
新随笔
联系
订阅
管理
2016年6月30日
Spark Streaming源码解读之Receiver在Driver的精妙实现全生命周期彻底研究和思考
摘要: 一:Receiver启动的方式设想 1. Spark Streaming通过Receiver持续不断的从外部数据源接收数据,并把数据汇报给Driver端,由此每个Batch Durations就可以根据汇报的数据生成不同的Job。 2. Receiver属于Spark Streaming应用程序启动
阅读全文
posted @ 2016-06-30 22:34 HaiziS
阅读(272)
评论(0)
推荐(0)
编辑