HBase - 随笔分类 - HBase技术社区

直播：中国HBase技术社区第一届MeetUp

摘要：6月6日，由中国HBase技术社区组织，阿里云主办的中国第一届HBase Meetup将在北京举行，来自阿里、小米、滴滴、360等公司的各位大神会共同探讨HBase2.0的技术革新，HBase在国内各个大型企业内的应用价值，并一起见证中国HBase技术社区成立仪式的历史时刻。主办方阿里云将在线直播此阅读全文

posted @ 2018-06-06 14:16 HBase技术社区阅读(404) 评论(0) 推荐(0)

HBase运维基础--元数据逆向修复原理

摘要：背景鉴于上次一篇文章——“云HBase小组成功抢救某公司自建HBase集群，挽救30+T数据”的读者反馈，对HBase的逆向工程比较感兴趣，并咨询如何使用相应工具进行运维等等。总的来说，就是想更深层理解HBase运维原理，提高运维HBase生产环境的能力，应对各种常见异常现象。不同的读者对hbas 阅读全文

posted @ 2018-05-07 08:54 HBase技术社区阅读(710) 评论(0) 推荐(0)

一条数据的HBase之旅，简明HBase入门教程-开篇

摘要：常见的HBase新手问题: 什么样的数据适合用HBase来存储? 既然HBase也是一个数据库，能否用它将现有系统中昂贵的Oracle替换掉? 存放于HBase中的数据记录，为何不直接存放于HDFS之上? 能否直接使用HBase来存储文件数据? Region(HBase中的数据分片)迁移后，数据是否阅读全文

posted @ 2018-04-27 10:04 HBase技术社区阅读(586) 评论(0) 推荐(0)

HBase数据压缩编码探索

摘要：摘要：本文主要介绍了hbase对数据压缩，编码的支持，以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求，只有几百qps的冷数据缓存，却因为存储水位要浪费几十台服务器？你可曾遇到这种需求，几百G的表，必须纯cache命中，性能才能满足业务需求？你可曾遇到，阅读全文

posted @ 2018-04-23 08:39 HBase技术社区阅读(3117) 评论(0) 推荐(0)

HBase2.0新特性之In-Memory Compaction

摘要：In-Memory Compaction是HBase2.0中的重要特性之一，通过在内存中引入LSM结构，减少多余数据，实现降低flush频率和减小写放大的效果。本文根据HBase2.0中相关代码以及社区的讨论、博客，介绍In-Memory Compaction的使用和实现原理。原理概念和数据结构阅读全文

posted @ 2018-04-19 09:04 HBase技术社区阅读(2519) 评论(0) 推荐(0)

HBase在滴滴出行的应用场景和最佳实践

摘要：摘要：主要介绍了HBase和Phoenix在滴滴内部的一些典型案例。文章已在CSDN极客头条和《程序员》杂志发表，应朋友邀请，分享到云栖社区，希望给大家带来启发和帮助。背景对接业务类型 HBase是建立在Hadoop生态之上的Database，源生对离线任务支持友好，又因为LSM树是一个优秀的阅读全文

posted @ 2018-04-16 08:06 HBase技术社区阅读(649) 评论(0) 推荐(0)

如何避免HBase写入过快引起的各种问题

摘要：首先我们简单回顾下整个写入流程 client api ==> RPC ==> server IPC ==> RPC queue ==> RPC handler ==> write WAL ==> write memstore ==> flush to filesystem 整个写入流程从客户端调用A 阅读全文

posted @ 2018-04-11 10:30 HBase技术社区阅读(2244) 评论(0) 推荐(0)

HBase 数据迁移

摘要：最近两年负责 HBase，经常被问到一些问题，本着吸引一些粉丝、普及一点HBase 知识、服务一点阅读人群的目的，就先从 HBase 日常使用写起，后续逐渐深入数据设计、集群规划、性能调优、内核源码级解析、思考。数据迁移是 HBase 常见操作需求之一，本文将介绍 HBase 常用的大数据量数据阅读全文

posted @ 2018-04-09 13:30 HBase技术社区阅读(1464) 评论(0) 推荐(0)

HBase在大搜车金融业务中的应用实践

摘要：摘要： 2017云栖大会HBase专场，大搜车高级数据架构师申玉宝带来HBase在大搜车金融业务中的应用实践。本文主要从数据大屏开始谈起，进而分享了GPS风控实践，包括架构、聚集分析等，最后还分享了流式数据统计，包括数据流、数据合流和服务监控等。 2017云栖大会HBase专场，大搜车高级数据架构师阅读全文

posted @ 2018-04-06 14:56 HBase技术社区阅读(509) 评论(0) 推荐(0)

Hbase权限配置以及使用手册

摘要：1、Hbase权限控制简介 Hbase的权限控制是通过AccessController Coprocessor协处理器框架实现的，可实现对用户的RWXCA的权限控制。 2、配置配置hbase-site.xml CM主页→点击hbase(进入Hbase主页)→点击配置 2.1、点击左侧的Hbase服阅读全文

posted @ 2018-04-01 11:27 HBase技术社区阅读(10671) 评论(0) 推荐(0)

云Hbase数据库在亿方云实践之路

摘要：本文主要先介绍了亿方云，进而谈及了数据架构，着重分析了HBase实践等 2017云栖大会HBase专场，亿方云科技CTO 王成军带来HBase在亿方云客户端同步系统中的应用实践的演讲。本文主要先介绍了亿方云，进而谈及了数据架构，着重分析了HBase实践，最后对亿方云HBase演进和应用作了分享。以下阅读全文

posted @ 2018-03-28 15:41 HBase技术社区阅读(243) 评论(0) 推荐(0)

再谈HBase八大应用场景

摘要：HBase概述 HBase是一个分布式存储、数据库引擎，可以支持千万的QPS、PB级别的存储，这些都已经在生产环境验证，并且在广大的公司已经验证。特别是阿里、小米、京东、滴滴内部都有数千、上万台的HBase集群。选择一个技术的首要条件是对齐大公司，大公司会投入大量的人力去维护、改进、贡献社区。关于阅读全文

posted @ 2018-03-23 11:16 HBase技术社区阅读(35055) 评论(0) 推荐(0)

如何降低90%Java垃圾回收时间？以阿里HBase的GC优化实践为例

摘要：过去的一年里，我们准备在Ali-HBase上突破这个被普遍认知的痛点，为此进行了深度分析及全面创新的工作，获得了一些比较好的效果。以蚂蚁风控场景为例，HBase的线上young GC时间从120ms减少到15ms，结合阿里巴巴JDK团队提供的利器——AliGC，进一步在实验室压测环境做到了5ms。本阅读全文

posted @ 2018-03-15 10:43 HBase技术社区阅读(767) 评论(0) 推荐(2)