094-Spark-RDD-累加器

累加器用来把Executor端变量信息聚合到Driver端。在Driver程序中定义的变量,在Executor端的每个Task都会得到这个变量的一份新的副本,每个task更新这些副本的值后,传回Driver端进行merge。


posted @ 2022-01-09 13:54  爱吃麻辣烫呀  阅读(52)  评论(0)    收藏  举报