博客园  :: 首页  :: 新随笔  :: 联系 :: 订阅 订阅  :: 管理

Hbase 使用高可用 (HA)的hadoop集群

Posted on 2020-02-08 13:15  红与黑hyh  阅读(409)  评论(0编辑  收藏  举报

Hbase 使用高可用 (HA)的hadoop集群

  1. hdfs-site.xml core-site.xml  通过软链接 引用hadoop一样的配置

  ln –s 目标文件  软链接后文件

  1. 修改hbase-site.xml

   

修改成:

   

      ns1为namenode服务总称,对应hdfs-site.xml中的dfs.nameservices配置

 

hbase 配置高可用hmaster

1.先停掉hbase

bin/stop-hbase.sh

2.在hbase的conf目录下创建

backup-masters文件

添加内容

  HBASE02

3.将backup-masters分发到其它服务器

4.重新启动hbase并查看

bin/start-hbase.sh

 

regionserver配置

1.配置目录下,regionserver文件添加

HBASE02

HBASE03

【若将HBASE01也添加进去,会存在端口冲突,hmaster启动不起来,HBASE01的regionserver,在start-hbase.sh脚本里 会执行local-regionserver.sh启动】

2.regionserver内存设置

hbase-env.sh

export HBASE_REGIONSERVER_OPTS="-Djute.maxbuffer=52428800 –Xmx256m –Xms256m –Xmn128m -XX:PermSize=64M

 

52428800为每个节点最大数据量50m