HBase 快照操作
摘要：
1.配置hbase-site.xml hbase.snapshot.enabled true 2.创建快照 hbase> snapshot 'myTable', 'myTableSnapshot-122112' hbase>list_snapshots 3.删除快照del... 阅读全文
posted @ 2013-12-29 05:25 代码王子 阅读(389) 评论(0) 推荐(0)
HBase表重命名
摘要：
hbase shell> disable 'tableName'hbase shell> snapshot 'tableName', 'tableSnapshot'hbase shell> clone_snapshot 'tableSnapshot', 'newTableName'hbase ... 阅读全文
posted @ 2013-12-29 05:18 代码王子 阅读(554) 评论(0) 推荐(0)
HBase集群部署脚本
摘要：
#!/bin/bash # Sync HBASE_HOME across the cluster. Must run on master using HBase owner user. HBASE_HOME=/usr/local/hbase/current for rs in `cat $HBA... 阅读全文
posted @ 2013-12-29 05:11 代码王子 阅读(166) 评论(0) 推荐(0)
hbase 集群管理脚本
摘要：
#!/bin/bash # Show all running Java processes on region servers. Must run on master using HBase owner user. JAVA_HOME=/usr/local/jdk1.6 HBASE_HOME=/... 阅读全文
posted @ 2013-12-29 05:10 代码王子 阅读(113) 评论(0) 推荐(0)
Hbase replication操作
摘要：
1.修改hbase-site.xml文件 hbase.replication true 2.同步数据改变,重启hbase集群 3.创建备份表 hbae>create 'reptable1', { NAME => 'cf1', REPLICATION_SCOPE =>1} 3.hbase... 阅读全文
posted @ 2013-12-29 05:08 代码王子 阅读(342) 评论(0) 推荐(0)
HBase replication
摘要：
Hbase Replication 介绍 现状 Hbase 的replication目前在业界使用并不多见，原因有很多方面，比如说HDFS目前已经有多份备份在某种程度上帮助HBASE底层数据的安全性，而且很多公司的集群规模比较小并且对数据重要程度并不是很高，比如一些日志系统或者是作为一... 阅读全文
posted @ 2013-12-29 04:48 代码王子 阅读(225) 评论(0) 推荐(0)
Hbase 备份的方式
摘要：
HBase 备份的方式有三种： 1.下线备份 （1）停止集群。 （2）Distcp (3)restore 2.在线备份 -replication 3.在线北大 -CopyTable 4.在线备份-Export 阅读全文
posted @ 2013-12-29 04:43 代码王子 阅读(151) 评论(0) 推荐(0)
Hbase节点管理
摘要：
1.退役节点 (1) shell>balance_switch false 然后，hbase-daemon.sh stop regionserver (2) graceful_stop.shUsage: graceful_stop.sh [--config &conf-dir>] ... 阅读全文
posted @ 2013-12-29 04:31 代码王子 阅读(398) 评论(0) 推荐(0)
HBase提供的工具
摘要：
1 .压缩测试工具 hbase org.apache.hadoop.hbase.util.CompressionTest 1G数据不同的压缩算法得到的结果 +--------------------+--------------+ | MODIFIER | SIZE ... 阅读全文
posted @ 2013-12-29 03:47 代码王子 阅读(317) 评论(0) 推荐(0)
HBase 健康检查工具
摘要：
在HBase运维中 最常用的工具就是hbck. 查看整个集群的表状况。如果region很多，建议慎重使用，会比较慢，而采用（3）。 （1）hbase hbck 详细显示集群状况。 (2)hbase hbck -details 显示指定表的状况。 (3) hbase h... 阅读全文
posted @ 2013-12-29 03:07 代码王子 阅读(407) 评论(0) 推荐(0)
HBase Canary
摘要：
HBase Canary 用于检测HBase 系统的状态。它对指定表的每一个region 抓取一行，来探测失败或者延迟。 hbase org.apache.hadoop.hbase.tool.Canary -help Usage: bin/hbase org.apac... 阅读全文
posted @ 2013-12-29 02:34 代码王子 阅读(517) 评论(0) 推荐(0)
HBase Bulk Loading
摘要：
将数据导入到HBase有三种方式：（1） Mapreduce，输出为TableOutputFormat.(2) 用HBase API .(3)Bulk Loading。对于大量的数据入库，第三种数据是最为有效的。 下图描述了Bulk Loading的过程：先将数据（MySQL ,Ora... 阅读全文
posted @ 2013-12-29 02:11 代码王子 阅读(302) 评论(0) 推荐(0)
有用的技术网站
摘要：
淘宝：http://www.taobaotesting.com/blogs/2156 http://www.alidata.org/archives http://www.searchtb.com/ MYSQL数据仓库： http://books.brainy... 阅读全文
posted @ 2013-12-29 00:09 代码王子 阅读(111) 评论(0) 推荐(0)
HBase 运维分析
摘要：
问题分析的主要手段 1、监控系统：首先用于判断系统各项指标是否正常，明确系统目前状况 2、服务端日志：查看例如region移动轨迹，发生了什么动作，服务端接受处理了哪些客户端请求。 3、gc日志：gc情况是否正常 4、操作系统日志和命令：操作系统层面、硬件是否故障，当前状况如何 5、btrace... 阅读全文
posted @ 2013-12-29 00:06 代码王子 阅读(134) 评论(0) 推荐(0)
浙公网安备 33010602011771号