2014年11月30日

Spark技术内幕: Shuffle详解(二)

摘要: 本文主要关注ShuffledRDD的Shuffle Read是如何从其他的node上读取数据的。上文讲到了获取如何获取的策略都在org.apache.spark.storage.BlockFetcherIterator.BasicBlockFetcherIterator#splitLocalRem... 阅读全文

posted @ 2014-11-30 18:18 wu2198 阅读(152) 评论(0) 推荐(0)

导航