随笔分类 -  hbase

Hbase balance是个啥
摘要：1. 均衡操作 以1.4.9版本为例，默认balance策略是开启状态。如果关闭，在Ui会出现如下警告： The Load Balancer is not enabled which will eventually cause performance degradation in HBase as 阅读全文
posted @ 2022-11-18 15:40 硅谷工具人 阅读(405) 评论(0) 推荐(0)
Hbase单节点多RegionServer服务配置
摘要：将hbase目录拷贝后命名为hbase2,然后在hbase2中做如下修改。 1.hbase-site.xml hbase的默认端口是16020和16030，所以这里使用16120和16130。 <property> <name>hbase.regionserver.port</name> <valu 阅读全文
posted @ 2022-11-09 14:31 硅谷工具人 阅读(264) 评论(0) 推荐(0)
shell脚本实现Hbase服务的监控报警和自动拉起
摘要：需求说明 期初是我们的物理机上安装了Hbase，由于物理机硬件配置还可以，1T内存，64核。 只有4台机器，我们装完Hbase后，发现应用请求比较多，导致RegionServer经常挂掉。 但是机器本身资源使用率并不高，因此我们希望在一个节点上启用多个RegionServer服务。 如果一个节点启动 阅读全文
posted @ 2022-11-09 14:03 硅谷工具人 阅读(136) 评论(0) 推荐(0)
Hbase Region in Transition解决方法
摘要：问题：hbase集群请求超负载，导致HRegionServer服务宕掉，出现Region in Transition状态 重启后，如果Region in Transition一直存在很长时间，需要查看是否被某个producer锁住。 hbase修复工具下载地址 这里是源码，需要自己下载编译成jar包 阅读全文
posted @ 2022-10-27 19:31 硅谷工具人 阅读(1102) 评论(0) 推荐(0)
Hbase工具类-API操作
摘要：1. HbaseUtil工具类 Hbase虽然提供了相关的API，但是在实际使用过程中还是非常麻烦，因此根据官方的API封装对应的工具类，从而简化开发操作。 package com.king import java.math.BigDecimal import java.util import co 阅读全文
posted @ 2022-10-20 16:55 硅谷工具人 阅读(193) 评论(0) 推荐(0)
Hbase参数调优
摘要：1.RowKey设计 省略 2.参数优化 2.1 zk会话超时时间 hbase-site.xml zookeeper.session.timeout: 默认值90000毫秒(90s)。 当某个RegionServer挂掉后，90s之后Master才能察觉到。可适当减少此值，尽可能块的检测region 阅读全文
posted @ 2022-10-20 16:13 硅谷工具人 阅读(467) 评论(0) 推荐(0)
Hbase常用操作
摘要：#1 清空表数据 # truncate会把表分区也清除掉 truncate 'namespace:tableName' # truncate_preserve只清除数据 truncate_preserve 'namespace:tableNam #2 删除具体数据 # 删除emp表中特定的单元格数据 阅读全文
posted @ 2022-08-20 12:12 硅谷工具人 阅读(114) 评论(0) 推荐(0)
Hbase支持snappy压缩格式
摘要：说明 本篇文章整个操作都是在root账号下进行，所有操作步骤完成后，可以根据实际的需求，更改目录权限。 整个操作的目的有两个： 安装snappy包，安装完成后所在路径是/usr/local/lib/ 安装hadoop依赖的snappy包，安装完成后所在路径是 $HADOOP_HOME/lib/nat 阅读全文
posted @ 2022-05-07 17:34 硅谷工具人 阅读(364) 评论(0) 推荐(0)

成功之道，在于每个人生阶段都要有不同的目标，并且通过努力实现自己的目标，毕竟人生不过百年! 所有奋斗的意义在于为个人目标实现和提升家庭幸福，同时能推进社会进步和国家目标! 正如古人讲的正心诚意格物致知，修身齐家治国平天下。