摘要:
flume安装部署 flume下载地址 :http://archive.apache.org/dist/flume/ 这里用的flume版本是:apache-flume-1.6.0-bin.tar.gz 1. 上传解压安装包 (1)将apache-flume-1.6.0-bin.tar.gz上传到l 阅读全文
posted @ 2021-11-09 12:03
Paranoïa
阅读(57)
评论(0)
推荐(0)
摘要:
Hadoop伪分布式搭建 伪分布式一开始不需要克隆虚拟机,其余配置和Hadoop完全分布式一样 1. Hadoop安装 1.1 上传文件 用xftp上传hadoop-2.6.0.tar.gz文件到/opt/software中 1.2 解压文件 进入/opt/software中解压 cd /opt/s 阅读全文
posted @ 2021-11-09 12:03
Paranoïa
阅读(41)
评论(0)
推荐(0)
摘要:
sqoop安装部署 安装sqoop的前提是已经具备Java和Hadoop环境。 下载地址:https://www.apache.org/dyn/closer.lua/sqoop/ 这里用的是:sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz 1. sqoop的安装及配置 (1 阅读全文
posted @ 2021-11-09 12:02
Paranoïa
阅读(1106)
评论(0)
推荐(0)
摘要:
zookeeper安装部署 这里的zookeeper用的是:zookeeper-3.4.5.tar.gz 1.本地模式安装部署 1.1 安装前准备 (1)zookeeper下载地址:http://archive.apache.org/dist/zookeeper/ (2)安装jdk (3)拷贝Zoo 阅读全文
posted @ 2021-11-09 12:02
Paranoïa
阅读(376)
评论(0)
推荐(0)
摘要:
spark环境搭建 spark下载地址:http://archive.apache.org/dist/spark/ Scala下载地址:https://scala-lang.org/download/2.11.8.html 这里的spark版本用的是:spark-2.4.0-bin-hadoop2. 阅读全文
posted @ 2021-11-09 12:01
Paranoïa
阅读(76)
评论(0)
推荐(0)
摘要:
Kafka集群部署 部署Kafka之前必须先部署好zookeeper 1. zookeeper分布式安装部署 1.1 集群规划 在master、slave01和slave02三个节点上部署Zookeeper。 1.2 解压安装 (1)进入存放zookeeper安装包目录,解压Zookeeper安装包 阅读全文
posted @ 2021-11-09 11:59
Paranoïa
阅读(2086)
评论(0)
推荐(0)
摘要:
hive安装部署 hive官网地址:http://hive.apache.org/ 下载地址:http://archive.apache.org/dist/hive/ 这里用的hive版本是:apache-hive-1.1.0-bin.tar.gz 1. Hadoop集群配置 (1)必须启动hdfs 阅读全文
posted @ 2021-11-09 11:51
Paranoïa
阅读(205)
评论(0)
推荐(0)
摘要:
完全分布式搭建 Hadoop下载地址:http://archive.apache.org/dist/hadoop/core/ 这里用的Hadoop版本是:hadoop-2.6.0.tar.gz 1. 虚拟网络编辑器 NAT模式:设置网关和IP 比如: 网关:192.168.1.2 子网:192.16 阅读全文
posted @ 2021-11-09 11:50
Paranoïa
阅读(190)
评论(0)
推荐(0)