2024年4月23日
Spark设置executor-memory后，executor显示的内存不符问题
摘要： 以该命令为例，我们设置一个executor并分配内存为2800m，可以看到ui上只给executor分配了1.5G的内存。同理，如果你设置了--executor-memory=2g，那么实际上只会有1048.8M（(2048 - 300) * 0.6）的内存会被分配。 spark-submit -- 阅读全文
posted @ 2024-04-23 12:56 aminor 阅读(22) 评论(0) 推荐(0) 编辑
/**/ /**/