2020 年 4月 25 日随笔档案 - 风清_云淡

2020年4月25日

摘要： cloudermanager安装包地址：http://archive.cloudera.com/cm5/cm/5/cloudera-manager-el6-cm5.3.0_x86_64.tar.gz，红色部分为版本号，修改红色部分即可获取不同版本的安装包 CDH安装包地址：http://archi 阅读全文

posted @ 2020-04-25 19:04 风清_云淡阅读(4063) 评论(0) 推荐(0)

sparksql解析流程

摘要： 1、sparkSql处理核心：Catalyst工作流程（本质：把sql、dataframe相结合，以树tree的形式来存储、优化） 2、catalyst工作流程 1）Parser（解析器）：SqlParser生成LogicPlan Tree 主要是先进行词法分析，再进行语法非分析词法分析：将输入的阅读全文

posted @ 2020-04-25 19:03 风清_云淡阅读(1018) 评论(0) 推荐(0)