2020年11月7日
Spark Executor Task 的执行和数量
摘要： ###基本原理 (YARN 模式) 每个 stage 会有多个 partition，每个 partition 由 Executor 的一个 Task 执行 stage 的默认 partition 数量由 spark.default.parallelism 参数决定，默认由 parent stage 阅读全文
posted @ 2020-11-07 16:33 moon~light 阅读(3312) 评论(0) 推荐(0)