03 2017 档案

[How to] Phoenix 与 CDH5.4.2 HBase的整合
摘要:1.简介 Phoenix将SQL带回到了NOSQL的世界,其在HBase之上做了一个layer,客户端通过SQL调用Phoenix,Phoenix在转化为HBase客户算API进行访问HBase,其很多计算也是通过HBase的协处理器的机制来完成的。当前很多场景下使用CDH版本的HBase,可惜Cl 阅读全文

posted @ 2017-03-27 14:33 xf-xrh-xf 阅读(1864) 评论(0) 推荐(0)

【会装】kylin的安装(填坑)和简单使用
摘要:1.简介 kylin的设计思想是空间换时间,将hive上的大表的维度全部排列组合计算也将度量提前计算然后存入HBase库,这个步骤在kylin中称之为build cube。 在查询的时候已经建立cube的hive表会直接访问HBase的scan来拿出结果,对于度量则可以直接get即可。由于数据量的膨 阅读全文

posted @ 2017-03-14 14:46 xf-xrh-xf 阅读(3589) 评论(0) 推荐(0)

[会装]Hive安装(基于mysql数据库)
摘要:环境信息:Mac 安装步骤: 1. 下载hive组件(我选择的是社区的2.0.1版本) http://apache.mirror.globo.tech/hive/hive-2.0.1/ 2. 下载mysql驱动 https://dev.mysql.com/downloads/connector/j/ 阅读全文

posted @ 2017-03-14 14:25 xf-xrh-xf 阅读(434) 评论(0) 推荐(0)

[How to]HBase集群备份方法--Replication机制
摘要:1.简介 HBase备份的方法在[How to]HBase集群备份方法文章中已经有些介绍,但是这些方法都不是HBase本身的特性在支持,都是通过MR计算框架结合HBase客户端的方式,或者直接拷贝HBase的底层hdfs数据的方式进行备份的,但从操作上来说也比较繁琐复杂,数据完整性和及时性上也做的并 阅读全文

posted @ 2017-03-01 01:19 xf-xrh-xf 阅读(8320) 评论(2) 推荐(1)

导航