Spark技术内幕: Task向Executor提交的源码解析
摘要:
在上文《Spark技术内幕:Stage划分及提交源码分析》中,我们分析了Stage的生成和提交。但是Stage的提交,只是DAGScheduler完成了对DAG的划分,生成了一个计算拓扑,即需要按照顺序计算的Stage,Stage中包含了可以以partition为单位并行计算的Task。我们并没有... 阅读全文
posted @ 2014-10-19 18:16 wu2198 阅读(211) 评论(0) 推荐(0)
浙公网安备 33010602011771号