摘要: 1. 什么是累加器 累加器是用来把Executor端的变量信息聚合到Driver端 2. 累加器实现原理 * 在Driver程序中定义的变量,在Executor端的每个Task节点上都会复制这个变量的副本 * ,每个Task节点更新这些副本的值后,再传回Driver端进行merge 3. 怎样获取累 阅读全文
posted @ 2022-04-05 16:14 学而不思则罔! 阅读(159) 评论(0) 推荐(0)
摘要: https://blog.csdn.net/qidasheng2012/article/details/105771052 https://developer.aliyun.com/article/696266 阅读全文
posted @ 2022-04-05 08:22 学而不思则罔! 阅读(25) 评论(0) 推荐(0)