打赏
摘要: 第一步: Ambari安装之Ambari安装前准备(CentOS6.5)(一) 第二步: Ambari安装之部署本地库(镜像服务器)(二) 第三步: Ambari安装之安装并配置Ambari-server(三) 第四步: Ambari安装之部署hdp单节点集群 第五步: Ambari安装之部署3个节 阅读全文
posted @ 2017-03-27 22:38 大数据和AI躺过的坑 阅读(6559) 评论(0) 推荐(0)
摘要: 前期博客 大数据领域两大最主流集群管理工具Ambari和Cloudera Manger Ambari架构原理 Ambari安装之Ambari安装前准备(CentOS6.5)(一) Ambari安装之部署本地库(镜像服务器)(二) 部署hdp单节点集群 (1)部署Agent 1) 注册并安装agent 阅读全文
posted @ 2017-03-27 22:35 大数据和AI躺过的坑 阅读(12901) 评论(2) 推荐(0)
摘要: 前期博客 Ambari安装之部署单节点集群 其实,按照这个步骤是一样的。只是按照好3个节点后,再做下HA即可。 部署3个节点的HA分布式集群 (1)添加机器 和添加服务的操作类似,如下图 之后的添加ambari03、ambari04操作就和部署ambari02类似,可以参照前面的步骤。这里不多赘述。 阅读全文
posted @ 2017-03-27 22:35 大数据和AI躺过的坑 阅读(12636) 评论(3) 推荐(0)
摘要: 部署本地库(镜像服务器) (1)下载HortWorks官网上的3个库到本地(也可以在线下载,但是速度会很慢) 我们先把hortworks官网上需要下载的3个库下载到本地(这个还是需要很长时间的,当然你也可以在线下载,通过wget但是由于文件比较大,所以下载会非常慢)然后把他上传到我们的镜像服务器上。 阅读全文
posted @ 2017-03-27 22:34 大数据和AI躺过的坑 阅读(12428) 评论(0) 推荐(0)
摘要: 不多说,直接上干货! 前期博客 Ambari安装之部署本地库(镜像服务器)(二) 安装并配置Ambari-server (1)检查仓库是否可用 (2)安装Ambari-server (3)配置Ambari-server 注意: 如果你是root用户,则这里就写root (推荐) 好比我这里是hado 阅读全文
posted @ 2017-03-27 22:34 大数据和AI躺过的坑 阅读(23564) 评论(2) 推荐(0)
摘要: 优秀博客 《Ambari——大数据平台的搭建利器》 Ambari安装前准备 (一)机器准备 192.168.80.144 ambari01 (部署Ambari-server和Mirror server) (分配1G,我这里只是体验过程,当然你可以分配更多或更小) 192.168.80.145 amb 阅读全文
posted @ 2017-03-27 22:32 大数据和AI躺过的坑 阅读(14226) 评论(0) 推荐(2)
摘要: 不多说,直接上干货! Ambari 架构原理图 通过三张图来说明: 第一张架构图告诉我们:Ambari是Hortonworks贡献给社区的、完全开源的、Hadoop生态的集群管理、监控、部署的工具: 第二张架构图告诉我们: 第三张架构图是第二张图的简化: 欢迎大家,加入我的微信公众号:大数据躺过的坑 阅读全文
posted @ 2017-03-27 22:16 大数据和AI躺过的坑 阅读(2310) 评论(0) 推荐(0)
摘要: 前期博客 Spark standalone模式的安装(spark-1.6.1-bin-hadoop2.6.tgz)(master、slave1和slave2) Spark运行模式概述 1. Standalone模式 即独立模式,自带完整的服务,可单独部署到一个集群中,无需依赖任何其他资源管理系统。从 阅读全文
posted @ 2017-03-27 20:59 大数据和AI躺过的坑 阅读(3430) 评论(0) 推荐(0)
摘要: 不多说,直接上干货! 目前Apache Spark支持三种分布式部署方式,分别是standalone、spark on mesos和 spark on YARN,其中,第一种类似于MapReduce 1.0所采用的模式,内部实现了容错性和资源管理,后两种则是未来发展的趋势,部分容错性和资源管理交由统 阅读全文
posted @ 2017-03-27 20:41 大数据和AI躺过的坑 阅读(6137) 评论(0) 推荐(0)