2023年6月1日
[spark] 常用参数和默认配置
摘要： ##常用的Spark任务参数及其作用： 1. `spark.driver.memory`：设置driver进程使用的内存大小，默认为1g。 2. `spark.executor.memory`：设置每个executor进程使用的内存大小，默认为1g。 3. `spark.executor.cores 阅读全文
posted @ 2023-06-01 13:26 家有花猪 阅读(755) 评论(0) 推荐(0)