会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
吾彦祖
博客园
首页
新随笔
联系
订阅
管理
2021年3月13日
02 Spark架构与运行流程
摘要: 1. 为什么要引入Yarn和Spark。 yarn是作业调度和集群资源管理的一个框架,从一定程度上溺化了多计算框架的优劣之争,解决了扩展性差,单点故障以及只能局限于MR计算框架等的问题。在MapReduce时代,很多人评论MapReduce不适合迭代计算和流失计算,于是出现了Spark和Storm等
阅读全文
posted @ 2021-03-13 17:01 吾彦祖
阅读(66)
评论(0)
推荐(0)
公告