随笔分类 -  大数据生态圈集群搭建

Hive启动报错-java.lang.IncompatibleClassChangeError
摘要:搭建Hive完成之后, 启动Hive失败, 显示如下错误:[ERROR] Terminal initialization failed; falling back to unsupportedjava.lang.IncompatibleClassChan... 阅读全文
posted @ 2019-01-03 10:45 七宝嘤嘤怪 阅读(1002) 评论(0) 推荐(0)
大数据生态圈集群搭建汇总--Hadoop & Hive & Spark & Kafka & HBase & Sqoop & Flume
摘要:集群搭建集群规划汇总Linux 环境准备Hadoop Ha 集群搭建Yarn 搭建Hive 搭建Spark 搭建Spark Standalone 模式Spark Yarn 模式Kafka 搭建Hbase 搭建Sqoop 搭建Flume 搭建本文将持续更新…集... 阅读全文
posted @ 2018-12-18 10:01 七宝嘤嘤怪 阅读(911) 评论(0) 推荐(0)
(三)大数据生态圈集群搭建之 --Yarn组件搭建 & Yarn监控页面操作
摘要:Yarn搭建Yarn资源调度流程集群规划Yarn搭建步骤查看Yarn的WebUI监控页面提交MapReduce应用程序到Yarn上运行并在监控页面查看Yarn资源调度流程想了解Yarn资源调度流程, 可点击此处查看集群规划角色node01node02node... 阅读全文
posted @ 2018-12-17 17:18 七宝嘤嘤怪 阅读(1361) 评论(0) 推荐(0)
(一)大数据生态圈集群搭建之 --Linux环境准备
摘要:搭建准备工作本地机环境准备安装包虚拟机工具连接工具上传工具CentOS虚拟机环境搭建通用配置静态IP配置时间同步配置JDK环境配置虚拟机clone && 主机名配置各节点地址配置免密登录配置防火墙配置修改生效本地机环境准备安装包JDK-1.8以上的版本, 需... 阅读全文
posted @ 2018-12-14 16:38 七宝嘤嘤怪 阅读(256) 评论(0) 推荐(0)
(二)大数据生态圈集群搭建之 --高可用(HA)完全分布式搭建 & NameNode-WebUI界面操作
摘要:搭建流程说明下载安装包高可用完全分布式搭建一. 集群规划二. hadoop安装配置三. zookeeper安装配置四. 集群格式化五. 启动, 操作, 关闭集群六.访问NameNode的WebUI页面七.搭建Hadoop的client说明 搭建之前, 先根... 阅读全文
posted @ 2018-10-14 12:55 七宝嘤嘤怪 阅读(891) 评论(0) 推荐(0)