随笔分类 -  hive

cdh5.7 做完HA后hive 查询出现异常： expected: hdfs://nameservice
摘要：异常信息如下： 异常原因： 做完HA后 hive 查询hdfs上文件只认 hdfs://nameservice1 解决办法： 1、需要修改hive 数据库里面 DBS ： Hive数据仓库的总路径 SDS ： Hive每张表对应的路径 2张表的数据。 将原来节点信息修改为HA后的名称 例如：DBS 阅读全文
posted @ 2016-08-09 16:25 zhanggl 阅读(5263) 评论(1) 推荐(0)
用java api 实现查询 Hive 数据
摘要：版本：cdh5.4.7， hive1.1.0 pom文件 需要先启动的服务有: ./hive --service hiveserver2 ./hive --service metastore java代码： 结果展示： 阅读全文
posted @ 2016-05-09 14:26 zhanggl 阅读(5830) 评论(0) 推荐(0)
在apache hadoop2.6 上部署hive 并将hive数据源存储于Mysql
摘要：集成hive 的前提是apache hadoop 集群能够正常启动。 hadoop 版本 apach2.6.0 hive 版本：1.2.1 1、安装mysql 并赋予权限： 1.1：创建hive 用户和密码： Create user ‘hive’ identified by ‘123456’ 1.2 阅读全文
posted @ 2016-03-07 15:18 zhanggl 阅读(1018) 评论(0) 推荐(0)
cm 安装cdh 后添加hive服务
摘要：cm 安装cdh 后添加hive服务，出现错误提示添加服务时候hive 配置如下：错误信息提示：错误日志：xec /opt/cloudera/parcels/CDH-5.4.7-1.cdh5.4.7.p0.3/lib/hadoop/bin/hadoop jar /opt/cloudera/parce... 阅读全文
posted @ 2015-12-25 16:19 zhanggl 阅读(6528) 评论(2) 推荐(0)
hive 分区表
摘要：hive 表数据复合 struts类型STRUCT{a INT; b INT} 通过 c.a 来获得 a的值create table test1(id INT, info struct) ROW FORMAT DELIMITED FIELDS TERMINATED BY ',' COLLECT... 阅读全文
posted @ 2015-11-25 11:59 zhanggl 阅读(188) 评论(0) 推荐(0)
hive和Hbase整合
摘要：本文部分来源：http://www.it165.net/admin/html/201406/3239.html https://cwiki.apache.org/confluence/display/Hive/HBaseIntegration创建 表：hbase_hive_1REATE TABLE... 阅读全文
posted @ 2014-07-29 14:01 zhanggl 阅读(948) 评论(0) 推荐(0)