随笔分类 -  HBase

HBase 学习
HBase 优化
摘要：HBase 优化 表优化 在使用List Put写入的时候可能会丢失一些数据，包括读写的时候都有可能存在丢书数据的情况 表切分 默认的表是存储再同一个Region上面的，当表太大的时候，表会自动的切分到其他的Region上面。 手动切分 # 手动的切分表名 >split ‘表名’ 这样当数据太大的时 阅读全文
posted @ 2020-12-02 15:40 shaoyayu 阅读(145) 评论(0) 推荐(0)
Hbase protobuf Java API
摘要：案例： 3、通话记录： 手机号 对方手机号 通话时长 时间 通话类型（主叫/被叫） 后续更新 阅读全文
posted @ 2020-12-02 15:37 shaoyayu 阅读(111) 评论(0) 推荐(0)
HBase数据库设计
摘要：HBase数据库设计 题目： 1、人员-角色 人员有多个角色 角色优先级 角色有多个人员 人员 删除添加角色 角色 可以添加删除人员 人员 角色 删除添加 2、组织架构 部门-子部门 查询 顶级部门 查询 每个部门的所有子部门 部门 添加、删除子部门 部门 添加、删除 3、通话记录： 手机号 对方手 阅读全文
posted @ 2020-12-02 15:36 shaoyayu 阅读(535) 评论(0) 推荐(0)
HBase与Protobuf
摘要：HBase与Protobuf 简介 官方文档 什么是 Google Protocol Buffer？ 假如您在网上搜索，应该会得到类似这样的文字介绍： Google Protocol Buffer( 简称 Protobuf) 是 Google 公司内部的混合语言数据标准，目前已经正在使用的有超过 4 阅读全文
posted @ 2020-08-10 06:40 shaoyayu 阅读(1104) 评论(0) 推荐(0)
HBase Java API
摘要：HBase API 说明 这里我配置的是HBase-0.98.23-hadoop2，api也是使用的是这个版本的 pom文件 <!-- https://mvnrepository.com/artifact/org.apache.hbase/hbase-client/0.98.23-hadoop2 - 阅读全文
posted @ 2020-08-10 06:39 shaoyayu 阅读(234) 评论(0) 推荐(0)
HBase全分布式部署
摘要：HBase全分布式部署 1、HDFS上的独立HBase 在独立的hbase上有时有用的变体是，所有守护程序都在一个JVM中运行，而不是持久化到本地文件系统，而是持久化到HDFS实例。 当您打算使用简单的部署概要文件时，可以考虑使用此概要文件，虽然负载很轻，但是数据必须在节点间来回移动。写入要复制数据 阅读全文
posted @ 2020-08-10 06:38 shaoyayu 阅读(2113) 评论(0) 推荐(0)
HBase 伪分布式搭建
摘要：Quick Start - Standalone HBase 1、简单配置 选择一个 Apache 下载镜像，下载 HBase Releases. 点击 stable目录，然后下载后缀为 .tar.gz 的文件; 例如 hbase-0.95-SNAPSHOT.tar.gz. 解压缩，然后进入到那个要 阅读全文
posted @ 2020-08-10 06:37 shaoyayu 阅读(390) 评论(0) 推荐(0)
HBase架构
摘要：HBase架构 HBase隶属于hadoop生态系统，它参考了谷歌的BigTable建模，实现的编程语言为 Java, 建立在hdfs之上，提供高可靠性、高性能、列存储、可伸缩、实时读写的数据库系统。它仅能通过主键(row key)和主键的range来检索数据，主要用来存储非结构化和半结构化的松散数 阅读全文
posted @ 2020-08-10 06:35 shaoyayu 阅读(379) 评论(0) 推荐(0)
HBase 入门
摘要：HBase 入门 Hadoop中的HBase ETL，是英文Extract-Transform-Load的缩写，用来描述将数据从来源端经过抽取（extract）、转换（transform）、加载（load）至目的端的过程。 简介： 非关系型数据库知识面扩展 Cassandra hbase mongo 阅读全文
posted @ 2020-08-10 06:27 shaoyayu 阅读(151) 评论(0) 推荐(0)