摘要: 原因: yarn.nodemanager.local-dirs和hadoop的hadoop.tmp.dir参数对应文件位置不一致 解决办法: 将hdfs-site.xml中hadoop.tmp.dir属性和yarn-site.xml中的yarn.nodemanager.local-dirs属性设置为 阅读全文
posted @ 2019-12-02 17:11 数据科学实践者 阅读(774) 评论(0) 推荐(0) 编辑
摘要: 问题出现原因: 因为远程提交hadoop的任务的情况下如果,没有hadoop 的系统环境变量,就会读取当前主机的用户名,所以Hadoop集群的节点中没有该用户名的权限,所以出现的异常。 解决方法: System.setProperty(“HADOOP_USER_NAME”,“hadoop2.7”); 阅读全文
posted @ 2019-12-02 15:41 数据科学实践者 阅读(2286) 评论(0) 推荐(0) 编辑