Hadoop 大数据 1.2.1 伪分布式安装

关闭防火墙

　　service iptables stop

　　chkconfig iptables off

查看状态是否关闭

　　service iptables status

修改hostname 主机名这里省略

1.查看主机名

2.主机名进行修改

3.主机名跟ip进行绑定

4.进行验证

设置ssh自动登录

ssh-keygen -t dsa -P '' -f /root/.ssh/id_dsa

cat /root/.ssh/id_dsa.pub >> /root/.ssh/authorized_keys

验证是否成功
 ssh localhost



安装jdk 这里省略。。

安装hadoop

　　wget http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-1.2.1/hadoop-1.2.1.tar.gz

　　解压 tar -zxvf hadoop-1.2.1.tar.gz

配置hadoop环境变量

验证是否配置成功

配置文件在conf目录下

主要配置文件如下： hadoop-env.sh core-site.xml hdfs-site.xml mapred-site.xml

1.hadoop-env.sh
　　export JAVA_HOME=/usr/local/jdk/

2.core-site.xml
　　<configuration>
　　　　<property>
　　　　　　<name>fs.default.name</name>
　　　　　　<value>hdfs://hadoop:9000</value>
　　　　　　<description>change your own hostname</description>
　　　　</property>
　　　　<property>
　　　　　　<name>hadoop.tmp.dir</name>
　　　　　　<value>/usr/local/hadoop/tmp</value>
　　　　　　</property>
　　</configuration>

备注：这里的hadoop 一定是自己的主机名，这里的hadoop是我设置的主机名

3.hdfs-site.xml
　　<configuration>
　　　　<property>
　　　　　　<name>dfs.replication</name>
　　　　　　<value>1</value>
　　　　</property>
　　　　<property>
　　　　　　<name>dfs.permissions</name>
　　　　　　<value>false</value>
　　　　</property>
　　</configuration>

4.mapred-site.xml
　　<configuration>
　　　　<property>
　　　　　　<name>mapred.job.tracker</name>
　　　　　　<value>hadoop:9001</value>
　　　　　　<description>change your own hostname</description>
　　　　</property>
　</configuration>

备注：这里的hadoop 一定是自己的主机名，这里的hadoop是我设置的主机名

配置完成

----------------------------------------------------------------------------------------------------------------------------------------------------------------

在hadoop-1.2.1目录下进行格式化

　　hadoop namenode -format