随笔分类 -  大数据之各种问题

1.软件安装中遇到的各种坑 2.平时遇到的各种bug
idea 连接hiveI进行一些简单操作
摘要：1.启动集群 ./start-all.sh 2.启动hiveserver2 hiveserver2 3.简单工具类 import org.junit.After; import org.junit.Before; import org.junit.Test; import java.sql.*; / 阅读全文
posted @ 2019-12-18 15:33 阿豪吖 阅读(2345) 评论(0) 推荐(0)
hadoop错误org.apache.hadoop.yarn.exceptions.YarnException Unauthorized request to start container
摘要：原因：集群时间不一致造成的 解决：同步集群时间即可 阅读全文
posted @ 2019-12-18 00:29 阿豪吖 阅读(1121) 评论(0) 推荐(0)
Hive中运行任务报错：Error during job, obtaining debugging information...
摘要：错误原因： namenode内存空间不够，JVM剩余内存空间不够新job运行所致 解决办法： 将hive设置成本地模式来执行任务 set hive.exec.mode.local.auto=true; 阅读全文
posted @ 2019-12-17 23:30 阿豪吖 阅读(3301) 评论(0) 推荐(0)
安装spark遇到的问题
摘要：1.启动spark SQL时,报错: Caused by: org.datanucleus.store.rdbms.connectionpool.DatastoreDriverNotFoundException: The specified datastore driver ("com.mysql. 阅读全文
posted @ 2019-12-16 23:49 阿豪吖 阅读(594) 评论(0) 推荐(0)
hive启动 java.lang.RuntimeException: java.lang.IllegalArgumentException: java.net.URISyntaxException
摘要：报错信息： Exception in thread "main" java.lang.RuntimeException: java.lang.IllegalArgumentException: java.net.URISyntaxException: Relative path in absolut 阅读全文
posted @ 2019-11-27 23:41 阿豪吖 阅读(1016) 评论(0) 推荐(0)