04 2019 档案

HBase 数据迁移方案介绍
摘要:一、前言 HBase数据迁移是很常见的操作,目前业界主要的迁移方式主要分为以下几类: 图1.HBase数据迁移方案 从上面图中可看出,目前的方案主要有四类,Hadoop层有一类,HBase层有三类。下面分别介绍一下。 二、Hadoop层数据迁移 2.1 方案介绍 Hadoop层的数据迁移主要用到Di 阅读全文

posted @ 2019-04-29 10:12 大数据运维 阅读(533) 评论(0) 推荐(0)

HBase Master HA高可用
摘要:HMaster没有单点问题,HBase中可以启动多个HMaster,通过Zookeeper的Master Election机制保证总有一个Master运行。 所以这里要配置HBase高可用的话,只需要启动两个HMaster,让Zookeeper自己去选择一个Master Acitve。 HBase配 阅读全文

posted @ 2019-04-28 16:49 大数据运维 阅读(1064) 评论(0) 推荐(0)

Hadoop2.7.7_HA高可用部署
摘要:1. Hadoop的HA机制 前言:正式引入HA机制是从hadoop2.0开始,之前的版本中没有HA机制 1.1. HA的运作机制 (1)hadoop-HA集群运作机制介绍 所谓HA,即高可用(7*24小时不中断服务) 实现高可用最关键的是消除单点故障 hadoop-ha严格来说应该分成各个组件的H 阅读全文

posted @ 2019-04-28 16:03 大数据运维 阅读(1995) 评论(0) 推荐(0)

Ambari2.6.2 HDP2.6.5 大数据集群搭建
摘要:Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SPARK-2.3.0 注:本文基于root用户操作 一、安装环境准备 操作系统 centos7.5 hdc-data1:192.168.163.5 阅读全文

posted @ 2019-04-18 19:23 大数据运维 阅读(815) 评论(0) 推荐(0)

导航