Spark技术内幕: Shuffle详解(一)
摘要:
通过上面一系列文章,我们知道在集群启动时,在Standalone模式下,Worker会向Master注册,使得Master可以感知进而管理整个集群;Master通过借助ZK,可以简单的实现HA;而应用方通过SparkContext这个与集群的交互接口,在创建SparkContext时就完成了App... 阅读全文
posted @ 2014-11-29 21:39 wu2198 阅读(236) 评论(0) 推荐(0)
浙公网安备 33010602011771号