irt4 ---导致内存不足,导致ruduce特别慢 2013/01/10

mapred.tasktracker.reduce.tasks.maximum设置为12,导致内存不足,reduce copy数据也很慢  (reduce > copy (971 of 1537 at 0.06 MB/s) >)

解决方法:减少mapred.tasktracker.reduce.tasks.maximum的数目

posted @ 2013-01-10 19:00  ccmaotang  阅读(335)  评论(0编辑  收藏  举报