2014年11月29日

Spark技术内幕: Shuffle详解(一)

摘要: 通过上面一系列文章,我们知道在集群启动时,在Standalone模式下,Worker会向Master注册,使得Master可以感知进而管理整个集群;Master通过借助ZK,可以简单的实现HA;而应用方通过SparkContext这个与集群的交互接口,在创建SparkContext时就完成了App... 阅读全文

posted @ 2014-11-29 21:39 wu2198 阅读(236) 评论(0) 推荐(0)

导航