大数据遇到的问题--MapReduce任务运行到running job卡住
今天在完成作业的时候,运用Sqoop将大数据导出到Mysql里面,执行命令以后运行到runninf job就卡住了,就去查日志,折腾好长时间,还发现一个有趣的现象,虽然卡住,但是过一会刷新mysql能显示有数据,重复了好多次,发现都是这样的,百度去查问题的解决办法,一部分人说改文件配置,还有一部分人说将虚拟机的内存和处理器个数内核可以增大一些,觉得可能跟内存没关系,就去配置各种文件,配置的很混乱,到最后也没配置好,就试用的第二个办法,然后就可以了。卡住如下图所示,配置的内存4,处理器个数2,内核2.