06 2022 档案

spark中代码的执行位置（Driver or Executer）
摘要：什么计算运行在executor，什么算子运行在driver？ （1）、foreachRdd运行在driver节点，因为它是操作dstream的。foreachPartition和foreach运行在worker节点，因为它是操作rdd的。foreachRdd开启对任务的启动，当执行到执行算子的时候开 阅读全文
posted @ 2022-06-13 17:07 杰然不同2019 阅读(703) 评论(0) 推荐(0)