2017年2月26日
[Spark内核] 第34课：Stage划分和Task最佳位置算法源码彻底解密
摘要： 本課主題 Job Stage 划分算法解密 Task 最佳位置算法實現解密 引言 作业调度的划分算法以及 Task 的最佳位置的算法，因为 Stage 的划分是DAGScheduler 工作的核心，这也是关系到整个作业有集群中该怎么运行；其次就是数据本地性，Spark 一舨的代码都是链式表达的，这就 阅读全文
posted @ 2017-02-26 00:43 無情 阅读(3339) 评论(0) 推荐(2) 编辑