会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
啤酒泡枸杞
林无静树,川无停流。
博客园
首页
新随笔
联系
订阅
管理
2020年5月11日
Spark的Job的划分
摘要: Job的划分 1、Application : 应用,创建一个SparkContext可以认为创建了一个Application 2、Job 在一个app中每执行一次行动算子 就会创建一个Job,一个application会有多个job 3、stage 阶段,每碰到一个shuffle算子,会产生一个新的
阅读全文
posted @ 2020-05-11 22:29 七寸青衫
阅读(1430)
评论(0)
推荐(1)
公告
loading: { rebound: { tension: 16, }, spinner: { id: 'spinner', radius: 90, } }