Loading...

2018年10月13日
深入理解spark－taskScheduler，schedulerBackend源码分析
摘要： 上次分析了dagshceduler是如何将任务拆分成job，stage，task的，但是拆分后的仅仅是一个逻辑结果，保存为一个resultstage对象，并没执行； 而将任务正在执行的是spark的taskscheduler模块和shcedulerbackend模块， taskcheduler模块负 阅读全文
posted @ 2018-10-13 13:25 严康 阅读(1746) 评论(0) 推荐(0) 编辑