hadoop - 随笔分类 - 狂奔的蜗牛163

hadoop2集群中的datanode启动以后自动关闭的问题

摘要：今天在启动前几天搭建成功的hadoop集群的时候，出现了datanode启动之后自动关闭的情况，经过查询之后发现问题产生的原因是：在第一次格式化dfs后，启动并使用了hadoop，后来又重新执行了格式化命令（hdfs namenode -format)，这时namenode的clusterID会重新阅读全文

posted @ 2016-05-09 08:59 狂奔的蜗牛163 阅读(618) 评论(0) 推荐(0)

启动hadoop时候报错：localhost: ssh: Could not resolve hostname localhost: Temporary failure in name resolution”

摘要：这个错误是由于配置文件没有配置好。解决方案如下： 1 打开profile文件 vim /etc/profile 2 在文件最后加入的内容应该如下（高亮的两句一般是大家缺少的）： export JAVA_HOME=/usr/java/jdk export HADOOP_HOME=/itcast/had 阅读全文

posted @ 2016-05-08 08:58 狂奔的蜗牛163 阅读(18672) 评论(1) 推荐(0)

hadoop集群环境搭建之zookeeper集群的安装部署

摘要：关于hadoop集群搭建有一些准备工作要做，具体请参照hadoop集群环境搭建准备工作（我成功的按照这个步骤部署成功了，经实际验证，该方法可行）一、安装zookeeper 1 将zookeeper的安装包上传到linux系统中，并且建立 /root/itcast/目录，将其解压到该目录下： t 阅读全文

posted @ 2016-05-08 07:46 狂奔的蜗牛163 阅读(1983) 评论(0) 推荐(0)

hadoop集群环境搭建之安装配置hadoop集群

摘要：在安装hadoop集群之前，需要先进行zookeeper的安装，请参照hadoop集群环境搭建之zookeeper集群的安装部署 1 将hadoop安装包解压到 /itcast/ (如果没有这个目录可以先自行创建之) tar -zxvf hadoop-2.6.4.tar.gz -C /itcast 阅读全文

posted @ 2016-05-08 07:45 狂奔的蜗牛163 阅读(666) 评论(0) 推荐(0)

hadoop集群环境搭建准备工作

摘要：一定要注意hadoop和linux系统的位数一定要相同，就是说如果hadoop是32位的，linux系统也一定要安装32位的。准备工作： 1 首先在VMware中建立6台虚拟机（配置默认即可）。这是我们的集群规划：主机名 IP 安装的软件运行的进程 itcast11 192.168.1.201 阅读全文

posted @ 2016-05-07 10:16 狂奔的蜗牛163 阅读(448) 评论(0) 推荐(0)

安装zookeeper时候，可以查看进程启动，但是状态显示报错：Error contacting service. It is probably not running

摘要：安装zookeeper-3.3.2的时候，启动正常没报错，但zkServer.sh status查看状态的时候却出现错误，如下： JMX enabled by defaultUsing config: /hadoop/zookeeper/bin/../conf/zoo.cfgError contac 阅读全文

posted @ 2016-05-05 09:00 狂奔的蜗牛163 阅读(62685) 评论(6) 推荐(3)

随笔分类 - hadoop