摘要：
在安装ganglia的时候，需要安装ttdtol, 否则是不运去安装的。查可很多，这个可以。 我的环境： [hadoop@host8 ~]$ lsb_release -aLSB Version: :core-4.0-ia32:core-4.0-noarch:graphics-4.0-ia32:gra 阅读全文
posted @ 2016-07-14 23:35
dy9776
阅读(433)
评论(0)
推荐(0)
摘要：
在master（即：host2）中执行 hadoop jar hadoop-test-1.1.2.jar DFSCIOTest -write -nrFiles 12 -fileSize 10240 -resFile test 最后fail，为啥，看了一下日志 attempt_201607141305 阅读全文
posted @ 2016-07-14 15:51
dy9776
阅读(3238)
评论(0)
推荐(0)
摘要：
原文 http://www.cnblogs.com/wolfblogs/p/4147485.html 用了一段时间的hadoop，现在回来看看源码发现别有一番味道，温故而知新，还真是这样的 在使用hadoop之前我们需要配置一些文件，hadoop-env.sh，core-site.xml，hdfs- 阅读全文
posted @ 2016-07-14 10:53
dy9776
阅读(715)
评论(0)
推荐(0)
摘要：
hadoop集群中主要进程有master: NameNode, ResourceManager,slaves: DataNode, NodeManager, RunJar, MRAppMaster,YarnChild其中 RunJar, MRAppMaster,YarnChild与随着某个job的创 阅读全文
posted @ 2016-07-14 10:45
dy9776
阅读(387)
评论(0)
推荐(0)
摘要：
hadoop fs：使用面最广，可以操作任何文件系统。 hadoop dfs与hdfs dfs：只能操作HDFS文件系统相关（包括与Local FS间的操作），前者已经Deprecated，一般使用后者。 以下内容参考自stackoverflow Following are the three co 阅读全文
posted @ 2016-07-14 10:41
dy9776
阅读(4269)
评论(0)
推荐(0)
摘要：
转：http://blog.csdn.net/jediael_lu/article/details/38705371 以下程序在hadoop1.2.1上测试成功。 本例先将源代码呈现，然后详细说明执行步骤，最后对源代码及执行过程进行分析。 一、源代码 二、执行程序 1、从eclipse从导出至wor 阅读全文
posted @ 2016-07-14 10:33
dy9776
阅读(267)
评论(0)
推荐(0)
摘要：
部分内容参考：http://www.linuxqq.net/archives/964.html http://slaytanic.blog.51cto.com/2057708/1100974/ http://blog.csdn.net/jediael_lu/article/details/38680 阅读全文
posted @ 2016-07-14 10:17
dy9776
阅读(740)
评论(0)
推荐(0)
摘要：
我执行下面步骤： 1、 动态增加DataNode节点和TaskTracker节点 以host9为例 在host9上执行： 指定主机名 vi /etc/hostname 指定主机名到IP地址的映射 vi /etc/hosts （hosts就是对datanode 和trac） 增加用户和组 addgro 阅读全文
posted @ 2016-07-14 00:56
dy9776
阅读(340)
评论(0)
推荐(0)
浙公网安备 33010602011771号