会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
AlinO_ozZ
Keep clam and Carry on~
博客园
首页
新随笔
联系
订阅
管理
2018年1月6日
Spark集群的部署及运行
摘要: 1.Spark运行模式 Spark 有很多种模式,最简单就是单机本地模式,还有单机伪分布式模式,复杂的则运行在集群中,目前能很好的运行在 Yarn和 Mesos 中,当然 Spark 还有自带的 Standalone 模式,对于大多数情况 Standalone 模式就足够了,如果企业已经有 Yarn
阅读全文
posted @ 2018-01-06 15:53 AlinO_ozZ
阅读(1349)
评论(0)
推荐(0)
2018年1月2日
Hive的安装和使用
摘要: 1 .安装Hive: sudo tar xvfz apache-hive-2.1.0-bin.tar.gz sudo cp -R apache-hive-2.1.0-bin /usr/local/hive sudo chown -R hadoop:hadoop /usr/local/hive 2.
阅读全文
posted @ 2018-01-02 11:03 AlinO_ozZ
阅读(332)
评论(0)
推荐(0)
HBase集群环境部署
摘要: HBase官方网站: http://hbase.apache.org/ 官网使用向导:http://hbase.apache.org/book.html 1.上传hbase安装包: 版本:hbase-1.2.4-bin.tar.gz 2.解压: sudo tar zxvf hbase-1.2.4-b
阅读全文
posted @ 2018-01-02 11:00 AlinO_ozZ
阅读(236)
评论(0)
推荐(0)
Hadoop多节点的集群部署(源码安装)
摘要: 一、部署环境: 我的测试环境: centos7 64bit 3台 node1 192.168.1.8 master slave node2 192.168.1.9 slave node3 192.168.1.11 slave 软件版本: hadoop2.7.3 jdk1.8 二、准备工作: 1.创建
阅读全文
posted @ 2018-01-02 10:57 AlinO_ozZ
阅读(255)
评论(0)
推荐(0)
Ambari部署hadoop集群环境
摘要: 一、Ambari介绍 1.介绍: Ambari 跟 Hadoop 等开源软件一样,也是 Apache Software Foundation 中的一个项目,并且是顶级项目。Ambari提供了一个直观的,易用的Hadoop管理web界面。 Ambari 自身也是一个分布式架构的软件, 采用的是Serv
阅读全文
posted @ 2018-01-02 10:54 AlinO_ozZ
阅读(468)
评论(0)
推荐(0)
一、Linux基本管理命令
摘要: 1.关机重启命令 (1)shutdown命令:shutdown [选项] 时间 选项:-c 取消前一个关机命令 -h 关机 -r 重启 例:shutdown -h now #立刻关机,root用户 +10& #10分钟后关机 20:30& #定义绝对重启时间 (2)其他关机命令(不一定正确保存):h
阅读全文
posted @ 2018-01-02 10:49 AlinO_ozZ
阅读(331)
评论(0)
推荐(1)
Docker
摘要: 1.获取镜像:#docker pull [选项] [Docker Registry 地址[:端口号]/]仓库名[:标签]Docker 镜像仓库地址:地址的格式一般是 <域名/IP>[:端口号] 。默认地址是 Docker Hub。仓库名:如之前所说,这里的仓库名是两段式名称,即 <用户名>/<软件名
阅读全文
posted @ 2018-01-02 10:13 AlinO_ozZ
阅读(135)
评论(0)
推荐(0)
公告