摘要： 第一部分 安装前准备 环境：workstation11 + centos 7 + hadoop-2.7.7 + mysql 5.6.40 + hive 2.3.3 首先安装mysql，步骤看这里。 接着安装HIVE。 第二部分 正式安装HIVE 1.开启hadoop集群，并关闭hadoop的安全模式 阅读全文

摘要： 前提： 环境：workstation 11 + CentOS 7 + mysql-5.6.40 安装前先查看服务器里是否有老版本的mysql已经被安装了 如果有就删除掉旧版本的mysql即可 正式安装： 1.上传安装包到/usr/local/目录下，解压缩，重命名，配置环境变量 2.创建目录，添加用 阅读全文

摘要： 目录 1.什么是HBase？ 2.HBase的优点 3.HBASE与传统数据库对比 ps: 行级数据库 vs 列式数据库 4.HBase角色 5.HBase与zookeeper的关系 1.什么是HBase？ HBase是一个高可用、高性能、可伸缩的列式分布式存储系统。说白了，HBase就是一种在HD 阅读全文

摘要： 第一部分 安装前准备 1.安装hadoop 今天刚刚学了hbase的一点基础，准备安装Hbase实际操练一下。因为安装hbase的前提条件是已经成功安装了hadoop，而且hadoop的版本要和hbase的版本相匹配。于是去官网查询了一下我安装的hadoop-3.1.0（目前是最新版）对应支持的hb 阅读全文

摘要： 目录 1.HDFS是什么？ 2.HDFS设计基础与目标 3.HDFS体系结构 3.1 NameNode（NN）3.2 DataNode（DN）3.3 SecondaryNameNode（SNN）3.4 块（Block）的概念3.5 文件安全 3.读取数据流程 4.HDFS的可靠性 4.1 冗余副本策 阅读全文

摘要： zookeeper有单机、伪集群、集群三种部署方式，可根据自己实际情况选择合适的部署方式。下边对这三种部署方式逐一进行讲解。 一 单机模式 1.下载 进入要下载的版本的目录，选择.tar.gz文件下载下载链接：http://archive.apache.org/dist/zookeeper/注意：点 阅读全文

摘要： 目录 1.zookeeper概述2.什么是zookeeper？3.为什么使用zookeeper？4.zookeeper的特性5.事务Transaction的ACID特性6.zookeeper的应用场景主要是?7.zookeeper的角色与系统模型8.leader角色与leader选举机制9.二阶提交 阅读全文

摘要： 目录： Hadoop三种安装模式 搭建伪分布式集群准备条件 第一部分 安装前部署 1.查看虚拟机版本2.查看IP地址3.修改主机名为hadoop4.修改 /etc/hosts5.关闭防火墙6.关闭SELINUX7.安装yum源并安装基础包8.关闭不必要的服务9.安装Java环境 第二部分 Hadoo 阅读全文

摘要： 1.挂载光盘 2.创建本地yum目录 3.将Packages下的所有包复制到本地yum目录，可能会耗费一点时间 4.复制结束后进入到/rpms_yum目录安装createrepo软件 方式一： 方式二： 5.使用createrepo命令来创建repository（仓库） 6.删除原有的repo支持文 阅读全文

摘要： 1. Linux系统：Red Hat Enterprise Linux Server release 6.5 (Santiago) 临时关闭防火墙命令：service iptables stop service ip6tables stop 永久关闭防火墙命令：chkconfig iptables 阅读全文