会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
一剑侵心
博客园
首页
新随笔
联系
管理
订阅
2018年1月14日
Spark Checkpoint 概述
摘要: 有时候,Transformation 的 RDD 非常多或者具体 Transformation 产生的 RDD 本身计算特别复杂和耗时,此时我们必须考虑对计算结果数据进行持久化。与 persist 不同,persist 是优先将结果放入内存,内存不够的情况下,会放在磁盘。无论是放内存还是磁盘,都是不
阅读全文
posted @ 2018-01-14 21:58 一剑侵心
阅读(998)
评论(0)
推荐(0)
公告