HBase Shell脚本命令
摘要:1、启动Hbase整个集群:$HBASE_HOME/bin/start-hbase.shbin/start-hbase.sh前者在服务器任意位置执行都ok,后者必须在安装路径下执行才有效,其实$HBASE_HOME的作用就是调用Hbase的安装路径 2、停止Hbase整个集群:$HBASE_HOME
阅读全文
Hbase集群搭建的必备条件
摘要:一、硬件条件1、64位的操作系统大于4G的内存2、为了充分利用HDFS,建议把Hbase和Hadoop安装在一起(可以减少I/O的需求,加快处理速度)3、保证一定量的内存、磁盘和cpu资源4、给系统一定的空闲资源,不建议把内存全都给java进程二、服务器1、Hadoop和Hbase有两种类型的机器:
阅读全文
Hbase存储实现
摘要:1、Hbase的数据存储在存储文件(store file)中,称为Hfile。 2、Hfile中存储的是经过排序的键值映射结构。文件内部由连续的块组成,块的索引信息存储在文件的尾部。 3、打开Hfile并加载到内存中时,索引的信息会优先加载到内存中,每个块的默认大小是64kb,可根据其需求配置不同的
阅读全文
Hbase的自动分区
摘要:一、HBase有哪些基本的特征HBase是类似于google的bigtable的开源实现,拥有以下特征:(1)、在HDFS之上(2)、 基于列存储的分布式数据库(3)、用于实时地读、写大规模数据集其他HBase的特性: (1)、没有真正的索引,行顺序存储,也没有所谓的索引膨胀问题。(2)、自动分区,
阅读全文
Hadoop2.7.5+Hbase1.4.0完全分布式集群搭建
摘要:Hadoop2.7.5+Hbase1.4.0完全分布式集群搭建一、在介绍完全分布式之前先给初学者推荐两本书:《Hbase权威指南》偏理论《Hbase实战》实战多一些 二、在安装完全分布式之前应该对他们的概念有个简单的认知:1、Hadoop擅长存储任意的、半结构化的,甚至是结构化的数据,几乎是现在所有
阅读全文