Spark-1.6.0中的Sort Based Shuffle源码解读
摘要：
从Spark-1.2.0开始，Spark的Shuffle由Hash Based Shuffle升级成了Sort Based Shuffle。即Spark.shuffle.manager从Hash换成了Sort。不同形式的Shuffle逻辑主要是ShuffleManager的实现... 阅读全文
posted @ 2016-05-25 23:22 吴一达 阅读(292) 评论(0) 推荐(0)
浙公网安备 33010602011771号