随笔分类 -  Bug汇总

记录学习工作中遇到的Bug以及解决方法
摘要:错误描述: 解决方法:查看zookeeper-3.4.2/conf目录下 编辑zoo.cfg文件 发现第三行有问题修改 阅读全文
posted @ 2019-12-19 11:52 数据科学实践者 阅读(1636) 评论(0) 推荐(0)
摘要:Exception message: /bin/bash: line 0: fg: no job control 这个错误是 本地idea跨平台远程调试hadoop集群出现的,在使用windows调用Hadoop yarn平台的时候都会出现类似的错误 方法一: 去把集群中的mapred-site配置 阅读全文
posted @ 2019-12-04 11:19 数据科学实践者 阅读(562) 评论(0) 推荐(0)
摘要:原因: yarn.nodemanager.local-dirs和hadoop的hadoop.tmp.dir参数对应文件位置不一致 解决办法: 将hdfs-site.xml中hadoop.tmp.dir属性和yarn-site.xml中的yarn.nodemanager.local-dirs属性设置为 阅读全文
posted @ 2019-12-02 17:11 数据科学实践者 阅读(837) 评论(0) 推荐(0)
摘要:问题出现原因: 因为远程提交hadoop的任务的情况下如果,没有hadoop 的系统环境变量,就会读取当前主机的用户名,所以Hadoop集群的节点中没有该用户名的权限,所以出现的异常。 解决方法: System.setProperty(“HADOOP_USER_NAME”,“hadoop2.7”); 阅读全文
posted @ 2019-12-02 15:41 数据科学实践者 阅读(2376) 评论(0) 推荐(0)