spark闭包检查

spark在执行算子时,如果算子内部用到了外部(Driver)端的对象或变量,就一定会出现闭包;spark在执行算子之前会进行闭包检查,也就是对外部对象或变量进行序列化检查;

 

posted on 2022-08-12 16:36  吴玉川  阅读(48)  评论(0)    收藏  举报