随笔分类 -  Hive

HUE中一些重要元数据表的DDL整理
摘要：收集记录了一些HUE中常用的元数据表的表结构，主要有： auth_permission auth_user axes_accessattempt axes_accesslog beeswax_queryhistory beeswax_session desktop_document2 具体DDL如下 阅读全文
posted @ 2019-03-21 14:25 LestatZ 阅读(567) 评论(0) 推荐(0)
Hive Insert Overwrite是否会产生临时文件
摘要：在Hive中使用INSERT OVERWRITE时， 数据会先被写入到数据文件夹的临时文件内，类似于 .hive-staging_hive_ 开头的文件 然后删除所有原文件，将临时文件重命名为”原文件“ 参考资料 what-is-the-behaviour-of-select-during-an-i 阅读全文
posted @ 2019-03-02 23:12 LestatZ 阅读(991) 评论(0) 推荐(0)
[Hive笔记]Hive常用命令整理
摘要：文章目录 Commonly used Hive Commands DDL Commands DML Commands 文章目录 Commonly used Hive Commands DDL Commands DML Commands Commonly used Hive Commands DDL 阅读全文
posted @ 2019-02-23 17:05 LestatZ 阅读(164) 评论(0) 推荐(0)
[Hive笔记]Hive编译器
摘要：Hive编译器 文章目录 Hive编译器 编译器主要部分 Hive SQL的编译过程 文章目录 Hive编译器 编译器主要部分 Hive SQL的编译过程 Hive编译器 编译器主要部分 Hive SQL的编译过程 Hive编译器 编译器主要部分 Hive SQL的编译过程 编译器主要部分 Hive 阅读全文
posted @ 2019-02-21 21:22 LestatZ 阅读(1294) 评论(0) 推荐(0)
[Hive笔记]Hive数据模型
摘要：Hive数据模型 Hive中的数据模型主要分为： 表，这些类似于关系数据库中的表。表可以过滤，投影，连接和联合。此外，表的所有数据都存储在HDFS的目录中。 Hive还支持外部表的概念，其中通过向表创建DDL提供适当的位置，可以在HDFS中的现有文件或目录上创建表。 分区，每个表可以有一个或多个分区 阅读全文
posted @ 2019-02-20 21:27 LestatZ 阅读(1031) 评论(0) 推荐(0)
[Hive笔记]Hive架构
摘要：Hive架构图 Hive主要组件 UI 用户界面 用户通过用户界面（CLI或则Web UI）向系统提交查询或者其他操作 Driver 驱动器 接受查询的组件，提供了JDBC/ODBC接口。 Compiler 编译器 解析查询的组件，对不同的查询块或查询语句进行语义解析，并配合表和分区的元数据生成执行 阅读全文
posted @ 2019-02-18 16:23 LestatZ 阅读(226) 评论(0) 推荐(0)