Spark sql 在yarn-cluster模式下找不到表
摘要:在hive里建一个数据库test,在数据库里建了一张表user,然后在Spark程序中使用Spark sql读取这张表 "select * form test.user" 当部署模式是spark stand模式和yarn-client模式时,程序可以正常运行,但yarn-cluster模式就报了找不
阅读全文
posted @
2017-01-11 15:32
骁枫
阅读(1669)
推荐(0)
Hive安装
摘要:一、下载:http://hive.apache.org/,选择合适的版本,Hive 1.X版本要求Hadoop2.x以上版本,Jdk1.7以上 这里选择1.2.1版本 二、安装jdk 略 三、安装Hadoop 略 四、安装Hive 1、tar -zxvf apache-hive-1.2.1-bin.
阅读全文
posted @
2016-09-28 11:14
骁枫
阅读(491)
推荐(0)
hive查看建表语句
摘要:查看hive建表语句:show create table tablename; 查看hive表结构:describe tablename; 简写:desc tablename;
阅读全文
posted @
2016-05-26 18:21
骁枫
阅读(20950)
推荐(0)