Spark调度模式-FIFO和FAIR
摘要:
Spark中的调度模式主要有两种:FIFO和FAIR。默认情况下Spark的调度模式是FIFO(先进先出),谁先提交谁先执行,后面的任务需要等待前面的任务执行。而FAIR(公平调度)模式支持在调度池中为任务进行分组,不同的调度池权重不同,任务可以按照权重来决定执行顺序。对这两种... 阅读全文
posted @ 2016-05-28 18:12 吴一达 阅读(471) 评论(0) 推荐(0)
posted @ 2016-05-28 18:12 吴一达 阅读(471) 评论(0) 推荐(0)