Adaptive Execution如何让Spark SQL更高效更好用
摘要:
1 背 景 Spark SQL / Catalyst 和 CBO 的优化,从查询本身与目标数据的特点的角度尽可能保证了最终生成的执行计划的高效性。但是 执行计划一旦生成,便不可更改,即使执行过程中发现后续执行计划可以进一步优化,也只能按原计划执行; CBO 基于统计信息生成最优执行计划,需要提前生成 阅读全文
posted @ 2018-11-07 09:40 大大的橙子 阅读(280) 评论(0) 推荐(0) 编辑