摘要：
时间服务器作用： 大数据产生与处理系统是各种计算设备集群的，计算设备将统一、同步的标准时间用于记录各种事件发生时序， 如E-MAIL信息、文件创建和访问时间、数据库处理时间等。 大数据系统内不同计算设备之间控制、计算、处理、应用等数据或操作都具有时序性， 若计算机时间不同步，这些应用或操作或将无法正 阅读全文
摘要：
使用vi或vim命令搜索某个关键字之后，取消高亮显示的方法 只要输入:noh即可 阅读全文
摘要：
传说，世界上只有两种动物能到达金字塔顶：一种是老鹰，还有一种，就是蜗牛。 老鹰和蜗牛它们是如此的不同： 鹰矫健、敏捷、锐利、残忍、凶狠，杀害同类从不迟疑。鹰靠自己的天赋和翅膀飞了上去。 平时工作中有很多雄鹰式的人物，他们不需要太努力就能达到高峰，他们身上充满了天赋，不需要学习具备才能。 这些有天赋的 阅读全文
摘要：
记一个比较初级的笔记。 流程 1. 创建一张表 2. 插入10条数据 3. 查看HFile 操作 1.创建表 2.插入10条数据 3. 查看HFile 命令：hbase hfile -v -p -m -f hdfs://ns/hbase/data/default/TEST1/5cd31c374a3b 阅读全文
摘要：
通过MemoryUsage可以查看Java 虚拟机的内存池的内存使用情况。MemoryUsage类有四个值（均以字节为单位）： Init java虚拟机在启动的时候向操作系统请求的初始内存容量。 java虚拟机在运行的过程中可能向操作系统请求更多的内存或将内存释放给操作系统，所以init的值是不确定 阅读全文
摘要：
转自：http://blog.sina.com.cn/s/blog_ae33b83901018euz.html HBase有几个高级特性，在你设计表时可以使用。这些特性不一定联系到模式或行键设计，但是它们定义了某些方面的表行为。本节我们讨论这些配置参数，以及你可以如何使用它们。1 可配置的数据块大小 阅读全文
摘要：
数据写入流程 源码：https://github.com/apache/hbase/blob/master/hbase-server/src/main/java/org/apache/hadoop/hbase/regionserver/HRegion.java 函数：doMiniBatchMutat 阅读全文
摘要：
一直有一个问题，今天调查了一下源码算是明白了。 问题 通过java api（如下代码所示）在创建表的时候，可以通过setMemStoreFlushSize函数来指定memstore的大小， 在集群配置文件中，也可以通过配置hbase.hregion.memstore.flush.size来指定mem 阅读全文
摘要：
（what）什么是预分区？ HBase表在刚刚被创建时，只有1个分区（region），当一个region过大（达到hbase.hregion.max.filesize属性中定义的阈值，默认10GB）时， 表将会进行split，分裂为2个分区。表在进行split的时候，会耗费大量的资源，频繁的分区对H 阅读全文
摘要：
HBase版本：1.3.1 TTL（Time-To-Live）：每个Cell的数据超时时间（当前时间 - 最后更新的时间） MinVersion：如果当前存储的所有时间版本都早于TTL，至少MIN_VERSION个最新版本会保留下来。这样确保在你的查询以及数据早于TTL时有结果返回。 先做一个实验 阅读全文