会员
周边
新闻
博问
融资
云市场
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
花喵
博客园
首页
新随笔
联系
订阅
管理
2019年9月2日
关于大数据中-----任务调度、资源调度
摘要: 1、 任务调度 a、RDD Objects >转换为DAG有向无环图 b、DAGScheduler 根据RDD之间的宽窄依赖切分Job,切分为Stage c、Stage本质上就是 TaskSet,Stage就会以TaskSet形式传给TaskScheduler d、TaskScheduler遍历Ta
阅读全文
posted @ 2019-09-02 20:19 花喵
阅读(1899)
评论(0)
推荐(0)
编辑
公告