2020 年 11月 23 日随笔档案 - niutao

2020年11月23日

摘要：上一篇：基于calcite做傻瓜式的sql优化(二) 上一篇说到的是Hive是如何对sql进行解析，生成ASTNode 那么Hive拿到ASTNode之后，就会触发：BaseSemanticAnalyzer.analyze这个方法；这个方法非常的重要，从AST到task的生成这一系列的操作，都会在阅读全文

posted @ 2020-11-23 23:34 niutao 阅读(3789) 评论(8) 推荐(2) 编辑

基于calcite做傻瓜式的sql优化(二)

摘要：上一篇：基于calcite做傻瓜式的sql优化(一) 因为主要想借助hive的思路来实现对sql的优化，所以这一篇主要是梳理一条sql在hive内部大概是什么样的生命周期首先通过一张图看下，内部sql大概执行流： sql经过一系列的规则处理后，最后变成task tree，然后mapreduce通过阅读全文

posted @ 2020-11-23 21:42 niutao 阅读(3200) 评论(0) 推荐(0) 编辑