2018年3月29日
深入理解spark streaming
摘要： spark streaming是建立在spark core之上的，也就说spark streaming任务最终执行还是依赖于RDD模型。在转化成最终的RDD模型执行前，spark streaming主要需要处理以下几个问题： a，每个batch的RDD是怎么根据用户的代码生成的（对应JobGener 阅读全文
posted @ 2018-03-29 19:21 超级核弹头 阅读(540) 评论(0) 推荐(0) 编辑