2019年9月2日
Spark2.x（六十三）：（Spark2.4）Driver如何把Task(闭包等)分配给Executor
摘要： 在Spark中一个appliation可能包含多个job，每个job都是由SparkContext#runJob(。。。)触发的，一个Job下包含1个或多个Stage，Job的最后一个stage为ResultStage，其余的stage都为ShuffleMapStage。ResultStage会生成 阅读全文
posted @ 2019-09-02 21:17 cctext 阅读(1048) 评论(0) 推荐(0)