随笔分类 -  hadoop

摘要:在集群环境下装机、配置、运行的全过程,梳理总结到本文中。第一部分:环境规划•用户 hadoop 密码 hadoop•机器机器名称IP地址Master.Hadoop192.168.1.100Salve1.Hadoop192.168.1.101Salve2.Hadoop192.168.1.102Salve3.Hadoop192.168.1.103 上述四个节点上均是CentOS6.4系统,并且有一个相同的用户hadoop。Master机器主要配置NameNode和JobTracker的角色,负责总管分布式数据和分解任务的执行;3个Salve机器配置DataNode和TaskTracker的角色,. 阅读全文
posted @ 2014-02-13 14:24 Ray.Wang 阅读(371) 评论(0) 推荐(0)
摘要:学习Hadoop的时候,用到的。这里作为记录。以下是最简洁的方式:4台虚拟机:用户:root、hadoophostname 分别是:Master.Hadoop、Slave1.Hadoop、Slave2.Hadoop、Slave3.Hadoop1.使用root登陆Master.HadoopSSH配置文件"/etc/ssh/sshd_config"的下列内容。 vi /etc/ssh/sshd_configRSAAuthentication yes # 启用 RSA 认证PubkeyAuthentication yes # 启用公钥私钥配对认证方式AuthorizedKeysF 阅读全文
posted @ 2014-01-18 13:53 Ray.Wang 阅读(366) 评论(0) 推荐(0)