会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
wenwen2016
博客园
首页
新随笔
联系
订阅
管理
上一页
1
2
3
2017年12月21日
spark编程入门-idea环境搭建
摘要: 原文引自:http://blog.csdn.net/huanbia/article/details/69084895 1、环境准备 idea采用2017.3.1版本。 创建一个文件a.txt 2、构建maven工程 点击File->New->Project… 点击Next,其中GroupId和Art
阅读全文
posted @ 2017-12-21 13:46 jinggangshan
阅读(584)
评论(0)
推荐(0)
2017年12月20日
mapduce简介
摘要: 原文引自:http://www.cnblogs.com/shishanyuan/p/4639519.html 1、环境说明 部署节点操作系统为CentOS,防火墙和SElinux禁用,创建了一个shiyanlou用户并在系统根目录下创建/app目录,用于存放Hadoop等组件运行包。因为该目录用于安
阅读全文
posted @ 2017-12-20 16:09 jinggangshan
阅读(945)
评论(0)
推荐(0)
hdfs简介
摘要: 原文引自:http://www.cnblogs.com/shishanyuan/p/4637631.html 1、环境说明 部署节点操作系统为CentOS,防火墙和SElinux禁用,创建了一个shiyanlou用户并在系统根目录下创建/app目录,用于存放Hadoop等组件运行包。因为该目录用于安
阅读全文
posted @ 2017-12-20 15:59 jinggangshan
阅读(342)
评论(0)
推荐(0)
spark生态圈简介
摘要: 原文引自:http://www.cnblogs.com/shishanyuan/p/4700615.html 1、简介 1.1 Spark简介 Spark是加州大学伯克利分校AMP实验室(Algorithms, Machines, and People Lab)开发通用内存并行计算框架。Spark在
阅读全文
posted @ 2017-12-20 15:26 jinggangshan
阅读(514)
评论(0)
推荐(1)
2017年12月19日
Spark运行架构详解
摘要: 原文引自:http://www.cnblogs.com/shishanyuan/p/4721326.html 1、 Spark运行架构 1.1 术语定义 lApplication:Spark Application的概念和Hadoop MapReduce中的类似,指的是用户编写的Spark应用程序,
阅读全文
posted @ 2017-12-19 09:42 jinggangshan
阅读(2360)
评论(0)
推荐(0)
上一页
1
2
3
公告