随笔分类 -  Hive

Hive
摘要:Hive调优 <! TOC "Hive调优" "Fetch抓取" "本地模式" "表的优化" "小表、大表Join" "大表Join大表" "MapJoin" "Group By" "Count(Distinct) 去重统计" "行列过滤" "动态分区调整" "案例实操" "数据倾斜" "Map数" 阅读全文
posted @ 2018-05-31 22:34 Lil-K 阅读(676) 评论(1) 推荐(0)
摘要:Hive函数 系统自带的函数 查看系统自带的函数 查看系统自带的函数 显示自带的函数的用法 详细显示自带的函数的用法 自定义函数描述 描述 当Hive提供的内置函数无法满足你的业务处理需要时,此时就可以考虑使用用户自定义函数(UDF:user defined function),详情请查看: "官网 阅读全文
posted @ 2018-05-31 22:33 Lil-K 阅读(2010) 评论(0) 推荐(0)
摘要:Hive查询 <! TOC "Hive查询" "基本查询" "全表和特定字段查询" "列别名" "算术运算符" "常用函数" "Limit语句" "Hive之where语句" "介绍" "比较运算符(Between/In/ Is Null)" "案例操作" "Like和RLike" "逻辑运算符(A 阅读全文
posted @ 2018-05-31 11:52 Lil-K 阅读(601) 评论(0) 推荐(0)
摘要:1. Hive基础 <! TOC "1. Hive基础" "Hive基本概念" "引入原因:" "Hive是什么" "Hive数据管理" "四种数据模型" "Hive内部表和外部表" "Hive数据类型" "Hive的优化" "Map的优化:" "Reduce 的优化" "一个Reduce:" "分 阅读全文
posted @ 2018-05-28 22:07 Lil-K 阅读(547) 评论(0) 推荐(0)
摘要:Hive基本使用 创建数据库 创建一个数据库,数据库在HDFS上的默认存储路径是/user/hive/warehouse/ .db 避免要创建的数据库已经存在错误,增加if not exists判断。(标准写法) 创建一个数据库,指定数据库在HDFS上存放的位置 修改数据库 用户可以使用ALTER 阅读全文
posted @ 2018-05-06 18:16 Lil-K 阅读(275) 评论(0) 推荐(0)
摘要:Hive安装及配置 下载hive安装包 此处以hive 0.13.1 cdh5.3.6版本的为例,包名为:hive 0.13.1 cdh5.3.6.tar.gz 解压Hive到安装目录 $ tar xvf hive 0.13.1 cdh5.3.6.tar.gz 重命名配置文件 mv hive def 阅读全文
posted @ 2018-05-06 18:07 Lil-K 阅读(648) 评论(0) 推荐(0)