2019年7月25日
spark 源码分析之十九 -- DAG的生成和Stage的划分
摘要： 上篇文章 spark 源码分析之十八 -- Spark存储体系剖析 重点剖析了 Spark的存储体系。从本篇文章开始，剖析Spark作业的调度和计算体系。 在说DAG之前，先简单说一下RDD。 对RDD的整体概括 文档说明如下： RDD全称Resilient Distributed Dataset， 阅读全文
posted @ 2019-07-25 19:08 JohnnyBai 阅读(5302) 评论(1) 推荐(3) 编辑