2017年6月30日
spark streaming(2) DAG静态定义及DStream,DStreamGraph
摘要： DAG 中文名有向无环图。它不是spark独有技术。它是一种编程思想 ，甚至于hadoop阵营里也有运用DAG的技术，比如Tez，Oozie。有意思的是，Tez是从MapReduce的基础上深化而来的分布式计算框架。其核心思想是将Map和Reduce两个阶段分成更多的函数，各个函数之间可自由组合，形 阅读全文
posted @ 2017-06-30 16:51 是奉壹呀 阅读(1961) 评论(0) 推荐(0) 编辑
← → ↓ ↑