spark的task调度器(FAIR公平调度算法)
摘要:
FAIR 调度策略的树结构如下图所示: FAIR 调度策略内存结构 FAIR 模式中有一个 rootPool 和多个子 Pool, 各个子 Pool 中存储着所有待分配的 TaskSetMagager 。 在 FAIR 模 式 中 , 需 要 先 对 子 Pool 进 行 排 序 , 再 对 子 P 阅读全文
posted @ 2019-11-04 14:41 herman很慢 阅读(1134) 评论(0) 推荐(0) 编辑