2017年4月20日
Sqoop数据迁移工具
摘要： 一、概述 sqoop 是 apache 旗下一款“ Hadoop 和关系数据库服务器之间传送数据”的工具。 导入数据： MySQL， Oracle 导入数据到 Hadoop 的 HDFS、 HIVE、 HBASE 等数据存储系统； 导出数据：从 Hadoop 的文件系统中导出数据到关系数据库 mys 阅读全文
posted @ 2017-04-20 19:43 凌-风 阅读(3733) 评论(0) 推荐(0)
Hbase(一)基础知识
摘要： 一、Hbase数据库介绍 1、简介 HBase 是 BigTable 的开源 java 版本。是建立在 HDFS 之上，提供高可靠性、高性能、列存储、 可伸缩、实时读写 NoSQL 的数据库系统。 NoSQL = NO SQL NoSQL = Not Only SQL 把 NoSQL 数据的原生查询 阅读全文
posted @ 2017-04-20 17:33 凌-风 阅读(23064) 评论(0) 推荐(2)
Zookeeper（四）Hadoop HA高可用集群搭建
摘要： 一、高可就集群搭建 1、集群规划 2、集群服务器准备 （1） 修改主机名（2） 修改 IP 地址（3） 添加主机名和 IP 映射（4） 同步服务器时间（5） 关闭防火墙（6） 配置免密登录（7） 安装 JDK 3、集群安装 （1）安装zookeeper集群 （2）安装hadoop集群 阅读全文
posted @ 2017-04-20 14:39 凌-风 阅读(753) 评论(0) 推荐(0)
Zookeeper(三) Zookeeper原理与应用
摘要： 一、zookeeper原理解析 1、进群角色描述 2、Paxos 算法概述（ ZAB 协议） 分布式一致性算法 3、Zookeeper 的选主（恢复模式） 以一个简单的例子来说明整个选举的过程.假设有五台服务器组成的 zookeeper 集群,它们的 id 从 1-5,同时它们都是最新启动的,也就是 阅读全文
posted @ 2017-04-20 11:40 凌-风 阅读(1996) 评论(0) 推荐(0)
Zookeeper(二) zookeeper集群搭建 与使用
摘要： 一、zookeeper集群搭建 鉴于 zookeeper 本身的特点，服务器集群的节点数推荐设置为奇数台。我这里我规划为三台， 为别为 hadoop01,hadoop02,hadoop03 1、下载地址： http://mirrors.hust.edu.cn/apache/zookeeper/ 版本 阅读全文
posted @ 2017-04-20 10:50 凌-风 阅读(995) 评论(0) 推荐(0)