Spark技术内幕: Shuffle详解(二)
摘要:
本文主要关注ShuffledRDD的Shuffle Read是如何从其他的node上读取数据的。上文讲到了获取如何获取的策略都在org.apache.spark.storage.BlockFetcherIterator.BasicBlockFetcherIterator#splitLocalRem... 阅读全文
posted @ 2014-11-30 18:18 wu2198 阅读(152) 评论(0) 推荐(0)
浙公网安备 33010602011771号