2019年9月2日
关于大数据中-----任务调度、资源调度
摘要： 1、 任务调度 a、RDD Objects >转换为DAG有向无环图 b、DAGScheduler 根据RDD之间的宽窄依赖切分Job，切分为Stage c、Stage本质上就是 TaskSet,Stage就会以TaskSet形式传给TaskScheduler d、TaskScheduler遍历Ta 阅读全文
posted @ 2019-09-02 20:19 花喵 阅读(1972) 评论(0) 推荐(0)