hadoop问题及解决 - 随笔分类 - 月下美妞1314

hadoop2.0中无法启动datanode的问题

摘要：问题描述：在启动datanode进程时，能成功的启动；但用jps查看进程时，发现进程不存在，下面是在datanode日记文件的错误信息如下图的截屏所示：主要原因：发生错误的原因：由于把data放在的tmp的零时目录下，导致格式化之后，datanode中的数据在namenode中无法找相应的句柄。解决... 阅读全文

posted @ 2014-09-21 19:43 月下美妞1314 阅读(306) 评论(0) 推荐(0)

hadoop中日志聚集问题

摘要：遇到的问题：当点击上面的logs时，会出现下面问题：这个解决方案为：By default, Hadoop stores the logs of each container in the node where that container was hosted. While this is irre... 阅读全文

posted @ 2014-05-16 11:11 月下美妞1314 阅读(596) 评论(0) 推荐(0)

PIG的配置

摘要：Pig是一个客户端应用程序，就算你要在Hadoop集群上运行Pig，也不需要在集群上装额外的东西。Pig的配置非常简单：1、下载pig，网址http://pig.apache.org/2、在机器上安装完成hadoop和jdk等。3、修改配置文件(.profile)export JAVA_HOME=/... 阅读全文

posted @ 2014-05-09 22:37 月下美妞1314 阅读(480) 评论(0) 推荐(0)

hadoop2.20.0集群安装教程

摘要：一、安装的需要软件及集群描述1、软件：Vmware9.0：虚拟机Hadoop2.2.0：Apache官网原版稳定版本JDK1.7.0_07：Oracle官网版本Ubuntu12.04LTS：长期支持版本Ganglia：集群性能监测软件ssh：SSH 为 Secure Shell 的缩写，由 IETF... 阅读全文

posted @ 2014-05-04 18:49 月下美妞1314 阅读(465) 评论(0) 推荐(0)

随笔分类 - hadoop问题及解决