会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
shenlanzifa
博客园
首页
新随笔
联系
订阅
管理
2015年1月14日
Spark RDD Cache算子的作用
摘要: 我们经常会对RDD执行一系列Transformation算子操作,逻辑上每经历一次变换,就会将RDD转换为一个新的RDD,RDD会被划分成很多的分区分布到集群的多个节点中。 分区是逻辑概念,为了防止函数式数据不可变行(immutable)导致的内存需求无限扩张,使得系统内存被快速...
阅读全文
posted @ 2015-01-14 16:53 shenlanzifa
阅读(1782)
评论(0)
推荐(0)