上一页 1 2 3 4 5 6 7 ··· 10 下一页
2017年5月11日
Hbase(六) hbase Java API
摘要： 一、 几个主要 Hbase API 类和数据模型之间的对应关系： 1、 HBaseAdmin关系： org.apache.hadoop.hbase.client.HBaseAdmin作用：提供了一个接口来管理 HBase 数据库的表信息。它提供的方法包括：创建表，删 除表，列出表项，使表有效或无效， 阅读全文
posted @ 2017-05-11 20:13 凌-风 阅读(57429) 评论(0) 推荐(5)
Hbase(五) hbase内部原理
摘要： 一、系统架构 客户端连接hbase依赖于zookeeper，hbase存储依赖于hadoop client： 1、包含访问 hbase 的接口， client 维护着一些 cache（缓存） 来加快对 hbase 的访问，比如 region 的 位置信息。 （经常使用的表的位置信息） zookeep 阅读全文
posted @ 2017-05-11 18:12 凌-风 阅读(4511) 评论(0) 推荐(1)
Hbase(四) 过滤器查询
摘要： 引言：过滤器的类型很多，但是可以分为两大类——比较过滤器，专用过滤器过滤器的作用是在服务端判断数据是否满足条件，然后只将满足条件的数据返回给客户端； 一、hbase过滤器的分类 1、比较过滤器 行键过滤器 RowFilter Filter filter1 = new RowFilter(Compar 阅读全文
posted @ 2017-05-11 12:03 凌-风 阅读(17248) 评论(0) 推荐(0)
2017年5月10日
Hbase(三) hbase协处理器与二级索引
摘要： 一、协处理器—Coprocessor 1、 起源Hbase 作为列族数据库最经常被人诟病的特性包括：无法轻易建立“二级索引”，难以执 行求和、计数、排序等操作。比如，在旧版本的(<0.92)Hbase 中，统计数据表的总行数，需 要使用 Counter 方法，执行一次 MapReduce Job 才 阅读全文
posted @ 2017-05-10 19:23 凌-风 阅读(16755) 评论(3) 推荐(2)
2017年5月9日
Hbase(补充)
摘要： 1、用sqoop 从mysql数据库导入数据到hbase时: 可以用 sqoop list-databases --connect jdbc:mysql://192.168.1.152:3306/ --username sqoop --password sqoop 测试是否可以连接到mysql数据库 阅读全文
posted @ 2017-05-09 12:06 凌-风 阅读(1122) 评论(0) 推荐(0)
2017年5月5日
Hbase（二）hbase建表
摘要： 一、建表高级属性 下面几个 shell 命令在 hbase 操作中可以起到很到的作用，且主要体现在建表的过程中，看 下面几个 create 属性 1、bloomfilter 布隆过滤器 默认是 NONE 是否使用布隆过虑及使用何种方式， 布隆过滤可以每列族单独启用 使用 HColumnDescrip 阅读全文
posted @ 2017-05-05 10:25 凌-风 阅读(6256) 评论(0) 推荐(0)
2017年4月20日
Sqoop数据迁移工具
摘要： 一、概述 sqoop 是 apache 旗下一款“ Hadoop 和关系数据库服务器之间传送数据”的工具。 导入数据： MySQL， Oracle 导入数据到 Hadoop 的 HDFS、 HIVE、 HBASE 等数据存储系统； 导出数据：从 Hadoop 的文件系统中导出数据到关系数据库 mys 阅读全文
posted @ 2017-04-20 19:43 凌-风 阅读(3733) 评论(0) 推荐(0)
Hbase(一)基础知识
摘要： 一、Hbase数据库介绍 1、简介 HBase 是 BigTable 的开源 java 版本。是建立在 HDFS 之上，提供高可靠性、高性能、列存储、 可伸缩、实时读写 NoSQL 的数据库系统。 NoSQL = NO SQL NoSQL = Not Only SQL 把 NoSQL 数据的原生查询 阅读全文
posted @ 2017-04-20 17:33 凌-风 阅读(23064) 评论(0) 推荐(2)
Zookeeper（四）Hadoop HA高可用集群搭建
摘要： 一、高可就集群搭建 1、集群规划 2、集群服务器准备 （1） 修改主机名（2） 修改 IP 地址（3） 添加主机名和 IP 映射（4） 同步服务器时间（5） 关闭防火墙（6） 配置免密登录（7） 安装 JDK 3、集群安装 （1）安装zookeeper集群 （2）安装hadoop集群 阅读全文
posted @ 2017-04-20 14:39 凌-风 阅读(753) 评论(0) 推荐(0)
Zookeeper(三) Zookeeper原理与应用
摘要： 一、zookeeper原理解析 1、进群角色描述 2、Paxos 算法概述（ ZAB 协议） 分布式一致性算法 3、Zookeeper 的选主（恢复模式） 以一个简单的例子来说明整个选举的过程.假设有五台服务器组成的 zookeeper 集群,它们的 id 从 1-5,同时它们都是最新启动的,也就是 阅读全文
posted @ 2017-04-20 11:40 凌-风 阅读(1996) 评论(0) 推荐(0)
上一页 1 2 3 4 5 6 7 ··· 10 下一页