小丑进场

摘要： 一. 状态改变机制源码分析 在剖析Master核心的资源调度算法之前，让我们先来看看Master的状态改变机制。 Driver状态改变 可以看出，一旦Driver状态发生改变，基本没有好事情，后果要么是删除Driver，要么是报异常！ removeDriver方法： 可以看出，一旦Driver状态发 阅读全文

摘要： 一. 主备切换机制 概要 Spark Master主备切换可以基于两种机制，一种是基于文件系统的，一种是基于Zookeeper的，基于文件系统的主备切换机制，需要在Active Master挂掉之后，由我们手动去切换到Standby Master上；而基于Zookeeper的主备切换机制，可以实现自 阅读全文