摘要:
spark 之所以需要调优,一是代码执行效率低,二是经常 OOM 内存溢出 内存溢出无非两点: 1. Driver 内存不够 2. Executor 内存不够 Driver 内存不够无非两点: 1. 读取数据太大 2. 数据回传 Executor 内存不够无非两点: 1. map 类操作产生大量数据 阅读全文
posted @ 2019-12-19 17:46
努力的孔子
阅读(4830)
评论(0)
推荐(1)
浙公网安备 33010602011771号