2016年5月3日

摘要: 一:TaskScheduler原理解密 1, DAGScheduler在提交TaskSet给底层调度器的时候是面向接口TaskScheduler的,这符合面向对象中依赖抽象而不依赖的原则,带来底层资源调度器的可插拔性,导致Spark可以运行的众多的资源调度器模式上,例如Standalone、Yarn 阅读全文
posted @ 2016-05-03 10:32 听风居士 阅读(392) 评论(0) 推荐(0) 编辑

导航