2020年9月4日
hadoop 伪分布式执行 mapreduce 任务时报 running beyond physical memory或者beyond vitual memory limits
摘要： 当运行中出现Container is running beyond physical memory这个问题出现主要是因为物理内存不足导致的，在执行mapreduce的时候，每个map和reduce都有自己分配到内存的最大值，当map函数需要的内存大于这个值就会报这个错误，解决方法： 在mapredu 阅读全文
posted @ 2020-09-04 19:57 东围居士 阅读(477) 评论(0) 推荐(0)
hadoop 伪分布式 yarn resourcemanager 无法启动
摘要： 现象： 执行 start-yarn.sh 后再执行JPS 发现没有 resourcemanager 进程，同时 localhost:8080 页面也打不开，查看日志文件 logs/yarn-hadoop-resourcemanager-Cavin-Y7000.log 发现报错信息中有如下语句： or 阅读全文
posted @ 2020-09-04 00:50 东围居士 阅读(3699) 评论(0) 推荐(1)