会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
FireOnFire
博客园
首页
新随笔
联系
订阅
管理
2022年10月5日
SparkCore:累加器和广播变量
摘要: 累加器 累加器(分布式共享只写变量):用来把 Executor 端变量信息聚合到 Driver 端。在 Driver 程序中定义的变量,在 Executor 端的每个 Task 都会得到这个变量的一份新的副本,每个 Task 更新这些副本的值之后,会传回 Driver 端进行 merge。 对 li
阅读全文
posted @ 2022-10-05 15:00 FireOnFire
阅读(90)
评论(0)
推荐(0)
公告