2017年11月28日
spark-调度策略之FAIR
摘要： 1、概述 spark有两种调度模式：FIFO、FAIR。FIFO是先进先出，有很强的顺序性，只有前一个处理完成后才会去处理后进来的。FAIR是公平调度，通过配置进行控制优先执行的任务。spark默认使用FIFO模式，如果应用场景里面有很多比较大的查询、也有很多小的查询，此时建议使用FAIR模式可以先 阅读全文
posted @ 2017-11-28 15:48 诗码者 阅读(2042) 评论(0) 推荐(0) 编辑