摘要：
文章目录 1.什么是hive 2.为什么要用hive 3.hive几种基本表类型 4.内部表（管理表）和外部表的区别 5.Hive数据仓库与数据库的异同 6.Hive 自定义函数 7.Hive中4种排序的区别 8.把数据加载到hive表中？ 9.hive创建表的方式及区别 10.hive元数据存放的 阅读全文
posted @ 2020-10-19 17:36
十一vs十一
阅读(592)
评论(0)
推荐(0)
摘要：
（九）Hive的5个面试题 目录 一、求单月访问次数和总访问次数 1、数据说明 2、数据准备 3、结果需求 4、需求分析 二、学生课程成绩 1、说明 2、需求 三、求每一年最大气温的那一天 + 温度四、求学生选课情况 1、说明 2、 需求 3、解析 1、数据说明 2、数据准备 3、需求 4、解析 五 阅读全文
posted @ 2020-10-19 17:35
十一vs十一
阅读(390)
评论(0)
推荐(0)
摘要：
Hive面试题整理（一） 1、Hive表关联查询，如何解决数据倾斜的问题？（☆☆☆☆☆） 1）倾斜原因：map输出数据按key Hash的分配到reduce中，由于key分布不均匀、业务数据本身的特、建表时考虑不周、等原因造成的reduce 上的数据量差异过大。 （1）key分布不均匀; （2）业务 阅读全文
posted @ 2020-10-19 17:34
十一vs十一
阅读(659)
评论(0)
推荐(0)
摘要：
1.Hive表关联查询，如何解决数据倾斜的问题 2.谈一下hive的特点，以及hive和RDBMS有什么异同 3.说一下hive中sort by、order by、cluster by、distribute by各代表的意思 4.简要描述数据库中的 null，说出null在hive底层如何存储，并解 阅读全文
posted @ 2020-10-19 17:33
十一vs十一
阅读(337)
评论(0)
推荐(0)
摘要：
1)Hive数据倾斜问题： 倾斜原因： map输出数据按Key Hash分配到reduce中,由于key分布不均匀、或者业务数据本身的特点。等原因造成的reduce上的数据量差异过大。 1.1)key分布不均匀 1.2)业务数据本身的特性 1.3)SQL语句造成数据倾斜 解决方案： 1>参数调节： 阅读全文
posted @ 2020-10-19 17:31
十一vs十一
阅读(197)
评论(0)
推荐(0)
摘要：
1.Hive数据倾斜问题。数据倾斜：数据倾斜主要表现在，map/reduce程序执行时，reduce节点大部分执行完毕，但是有一个或者几个reduce节点运行很慢，导致整个程序的处理时间很长，这是因为某一个key的条数比其他key多很多(有时是百倍或者千倍之多)，这条Key所在的reduce节点所处 阅读全文
posted @ 2020-10-19 17:16
十一vs十一
阅读(2396)
评论(0)
推荐(0)
摘要：
1. Hive数据倾斜 原因 key分布不均匀 业务数据本身的特性 SQL语句造成数据倾斜 解决方法 hive设置hive.map.aggr=true和hive.groupby.skewindata=true 有数据倾斜的时候进行负载均衡，当选项设定为true,生成的查询计划会有两个MR Job。第 阅读全文
posted @ 2020-10-19 17:14
十一vs十一
阅读(312)
评论(0)
推荐(0)
摘要：
3 3 4 第一题：1.创建 hadoop 帐户。 2.setup.改 IP。 3.安装 java，并修改/etc/profile 文件，配置 java 的环境变量。 4.修改 Host 文件域名。 5.安装 SSH，配置无密钥通信。 6.解压 hadoop。 7.配置 conf 文件下 hadoo 阅读全文
posted @ 2020-10-19 16:36
十一vs十一
阅读(194)
评论(0)
推荐(0)
摘要：
一、来自****提供的面试题（14** 道）： 第一题：1.创建 hadoop 帐户。 2.setup.改 IP。 3.安装 java，并修改/etc/profile 文件，配置 java 的环境变量。 4.修改 Host 文件域名。 5.安装 SSH，配置无密钥通信。 6.解压 hadoop。 7 阅读全文
posted @ 2020-10-19 16:34
十一vs十一
阅读(532)
评论(0)
推荐(0)
摘要：
阿里四轮面试总结 第一轮面试电话（**5** 月 6 号）： 1.自我介绍，包括做过项目。 2.有看过哪些 JDK 源码，了解哪些常用库。 3.集合框架 HashMap 的扩容机制，ConcurrnetHashMap 的原理 4.jvm 内存模型与 gc 内存回收机制 5.classloader 结 阅读全文
posted @ 2020-10-19 16:33
十一vs十一
阅读(448)
评论(0)
推荐(0)
浙公网安备 33010602011771号