摘要: 1. CacheManager 管理缓存,而缓存可以是基于内存的缓存,也可以是基于磁盘的缓存 2. CacheManager 需要通过 BlockMananger 来操作数据; 3. 当 Task 运行的时候会调用 RDD 的 compute 方法来进行计算,而 compute 方法会调用 iter 阅读全文
posted @ 2018-01-11 20:21 一剑侵心 阅读(974) 评论(0) 推荐(0)