2020 年 5月 12 日随笔档案 - 清浊

2020年5月12日

摘要： 1、executor注册机制 executor启动的是一个CoarseGrainedExecutorBackend这样一个进程， // Make fake resource offers on just one executor def makeOffers(executorId: String) 阅读全文

posted @ 2020-05-12 18:23 清浊阅读(362) 评论(0) 推荐(0)

Spark内核源码解析九：TaskScheduler原理解析和源码解析

摘要： 1、DAGScheduler submitMissingTasks taskScheduler.submitTasks TaskSchedulerImpl.submitTasks createTaskSetManager backend.reviveOffers() DriverActor Revi 阅读全文

posted @ 2020-05-12 17:54 清浊阅读(266) 评论(0) 推荐(0)