摘要: 上一篇:基于calcite做傻瓜式的sql优化(二) 上一篇说到的是Hive是如何对sql进行解析,生成ASTNode 那么Hive拿到ASTNode之后,就会触发:BaseSemanticAnalyzer.analyze这个方法; 这个方法非常的重要,从AST到task的生成这一系列的操作,都会在 阅读全文
posted @ 2020-11-23 23:34 niutao 阅读(3471) 评论(4) 推荐(2) 编辑
摘要: 上一篇:基于calcite做傻瓜式的sql优化(一) 因为主要想借助hive的思路来实现对sql的优化,所以这一篇主要是梳理一条sql在hive内部大概是什么样的生命周期 首先通过一张图看下,内部sql大概执行流: sql经过一系列的规则处理后,最后变成task tree,然后mapreduce通过 阅读全文
posted @ 2020-11-23 21:42 niutao 阅读(2965) 评论(0) 推荐(0) 编辑