摘要:
问题描述如下: 出现此问题可能是zookeeper不稳定造成的,采用的是虚拟机,经常挂起的状态,使用hbase的list命令出现下面错误,这个可能是hbase的稳定性造成的,解决办法有两种。这里使用第一种办法就解决了。 解决方法:1.重启hbase stop-hbase.sh stop-hbase. 阅读全文
posted @ 2017-03-15 21:49
大数据和AI躺过的坑
阅读(69306)
评论(2)
推荐(3)
摘要:
Hive不在主节点上搭建,我这里是在HadoopSlave1上。 阅读全文
posted @ 2017-03-15 18:07
大数据和AI躺过的坑
阅读(795)
评论(0)
推荐(0)
摘要:
前言 大家在搭建hadoop集群时,第一次格式化后,一路要做好快照。别随便动不动缺少什么进程,就来个格式化。 问题描述:启动hadoop时报namenode未初始化:java.io.IOException: NameNode is not formatted. 同时,若单独启动namenode,则出 阅读全文
posted @ 2017-03-15 14:01
大数据和AI躺过的坑
阅读(16653)
评论(0)
推荐(3)
摘要:
伪分布模式下,如(weekend110)hbase-env.sh配置文档中的HBASE_MANAGES_ZK的默认值是true,它表示HBase使用自身自带的Zookeeper实例。但是,该实例只能为单机或伪分布模式下的HBase提供服务。 若是分布式模式,则需要配置自己的Zookeeper集群。如 阅读全文
posted @ 2017-03-15 13:28
大数据和AI躺过的坑
阅读(3768)
评论(0)
推荐(0)
摘要:
HBase的多节点集群详细启动步骤(3或5节点)分为: 1、HBASE_MANAGES_ZK的默认值是false(zookeeper外装)(推荐) 2、HBASE_MANAGES_ZK的默认值是true(zookeeper自带) 1、HBASE_MANAGES_ZK的默认值是false(推荐) 伪分 阅读全文
posted @ 2017-03-15 13:26
大数据和AI躺过的坑
阅读(4986)
评论(0)
推荐(1)
摘要:
见,如下博客 hadoop-2.2.0.tar.gz的伪分布集群环境搭建(单节点) 很简单,不多赘述。 阅读全文
posted @ 2017-03-15 13:18
大数据和AI躺过的坑
阅读(1187)
评论(0)
推荐(0)
摘要:
版本1 利用自己写的脚本来启动,见如下博客 hadoop-2.6.0-cdh5.4.5.tar.gz(CDH)的3节点集群搭建 hadoop-2.6.0.tar.gz的集群搭建(3节点) hadoop-2.6.0.tar.gz的集群搭建(5节点) 版本2 第一步:见zookeeper启动 Zooke 阅读全文
posted @ 2017-03-15 13:16
大数据和AI躺过的坑
阅读(3626)
评论(0)
推荐(0)
摘要:
说在前面的话, 在这里,推荐大家,一定要先去看这篇博客,如下 再谈hive-1.0.0与hive-1.2.1到JDBC编程忽略细节问题 Hadoop Hive概念学习系列之hive三种方式区别和搭建、HiveServer2环境搭建、HWI环境搭建和beeline环境搭建(五) 版本1 先启动hado 阅读全文
posted @ 2017-03-15 13:12
大数据和AI躺过的坑
阅读(1211)
评论(0)
推荐(0)
摘要:
这个很简单,见如下博客。 1 week110的zookeeper的安装 + zookeeper提供少量数据的存储 [hadoop@weekend110 zookeeper-3.4.6]$ pwd/home/hadoop/app/zookeeper-3.4.6[hadoop@weekend110 zo 阅读全文
posted @ 2017-03-15 12:09
大数据和AI躺过的坑
阅读(1048)
评论(0)
推荐(0)
摘要:
分为 (1)分别去3或5节点上去启动Zookeeper进程 (2)自己写个脚本,直接在主节点上去启动Zookeeper进程。 (1)分别去3或5节点上去启动Zookeeper进程 第一步: [hadoop@HadoopMaster zookeeper-3.4.6]$ pwd/home/hadoop/ 阅读全文
posted @ 2017-03-15 12:07
大数据和AI躺过的坑
阅读(2594)
评论(0)
推荐(0)