odd_learner

2014年12月23日

spark 存储机制详解

摘要： 我们知道spark可以将运行过的RDD存储到内存上, 并在需要的时候重复利用. 那么spark是怎么完成这些工作的, 本文将通过分析源码来解释RDD的重复利用过程. 在上一篇文章解释了spark的执行机制, DAGScheduler负责分解action, 在DAGScheduler.getMi... 阅读全文

posted @ 2014-12-23 21:47 odd_learner 阅读(1298) 评论(0) 推荐(0)

导航