2013年6月17日

摘要: 安装一个Hadoop集群时,需要专门指定一个服务器作为主节点。三台虚拟机搭建的集群:(搭建集群时主机名不能一样,主机名在/etc/hostname修改)master机器:(集群的主节点,驻留NameNode和JobTracker守护进程)IP:10.61.1.21 机器名:wangwei1slaves机器:(集群的从节点,驻留DataNode和TaskTracker守护进程)IP:10.61.1.22 机器名:wangwei2IP:10.61.1.23 机器名:wangwei3这三台机器都安装好了hadoop-1.0.3,JDK和ssh。这三台机器都要编辑/etc/hosts... 阅读全文
posted @ 2013-06-17 16:13 王维_ICT 阅读(167) 评论(0) 推荐(0)
摘要: Hadoop的运行模式:单机模式(standalone) 单机模式是Hadoop的默认模式。当首次解压Hadoop的源码包时,Hadoop无法了解硬件安装环境,便保守地选择了最小配置。在这种默认模式下所有3个XML文件均为空。当配置文件为空时,Hadoop会完全运行在本地。因为不需要与其他节点交互,单机模式就不使用HDFS,也不加载任何Hadoop的守护进程。该模式主要用于开发调试MapReduce程序的应用逻辑。伪分布模式(Pseudo-Distributed Mode) 伪分布模式在“单节点集群”上运行Hadoop,其中所有的守护进程都运行在同一台机器上。该模式在单机模式之上增加了... 阅读全文
posted @ 2013-06-17 16:02 王维_ICT 阅读(298) 评论(0) 推荐(0)

导航