2015年1月14日
摘要: 我们经常会对RDD执行一系列Transformation算子操作,逻辑上每经历一次变换,就会将RDD转换为一个新的RDD,RDD会被划分成很多的分区分布到集群的多个节点中。 分区是逻辑概念,为了防止函数式数据不可变行(immutable)导致的内存需求无限扩张,使得系统内存被快速... 阅读全文
posted @ 2015-01-14 16:53 shenlanzifa 阅读(1782) 评论(0) 推荐(0)