2014年5月6日
hadoop yarn running beyond physical memory used
摘要： 老是报物理内存越界，kill container，然后把yarn.scheduler.minimum-allocation-mb设成2048就好了跟这个yarn.nodemanager.pmem-check-enabled参数应该也有关系在这篇文章中得到启发：http://dongxicheng.o... 阅读全文
posted @ 2014-05-06 18:09 ccmaotang 阅读(1095) 评论(0) 推荐(0)
Hadoop执行作业时报错：java.lang.OutOfMemoryError: Java heap space
摘要： 常常被一些用户问到，说“为什么我的mapreduce作业总是运行到某个阶段就报出如下错误，然后失败呢？以前同一个作业没出现过的呀？”10/01/10 12:48:01 INFO mapred.JobClient: Task Id : attempt_201001061331_0002_m_00002... 阅读全文
posted @ 2014-05-06 12:40 ccmaotang 阅读(3473) 评论(0) 推荐(0)