随笔 - 25  文章 - 0 评论 - 14 trackbacks - 0

摘要:DAGScheduler的主要作用有2个: 一、把job划分成多个Stage(Stage内部并行运行,整个作业按照Stage的顺序依次执行) 二、提交任务 以下分别介绍下DAGScheduler是如何做这2件事情的,然后再跟源码看下DAGScheduler的实现。 一、如何把Job划分成多个Stag 阅读全文
posted @ 2019-06-26 09:45 wangt.cc 阅读 (102) 评论 (0) 编辑