摘要:
Hadoop使用常见问题以及解决方法(1) - [分布式]Hadoop使用常见问题以及解决方法Hadoop,问题,解决1:Shuffle Error: Exceeded MAX_FAILED_UNIQUE_FETCHES; bailing-outAnswer:程序里面需要打开多个文件,进行分析,系统一般默认数量是1024,(用ulimit -a可以看到)对于正常使用是够了,但是对于程序来讲,就太少了。修改办法:修改2个文件。 /etc/security/limits.confvi /etc/security/limits.conf加上:* soft nofile 102400* hard n. 阅读全文
posted @ 2013-07-27 17:30
南宫星海
阅读(239)
评论(0)
推荐(0)
浙公网安备 33010602011771号