2020年3月27日
一篇文章搞清spark内存管理
摘要： [Toc] ​ 在执行Spark的应用程序时，Spark集群会启动Driver和Executor两种JVM进程，前者为主控进程，后者负责执行具体的计算任务。由于Driver的内存管理相对简单，本文主要对Executor的内存管理进行分析，下文中的Spark内存均特指Executor的内存。 1.堆内 阅读全文
posted @ 2020-03-27 14:58 西兰花是真的菜 阅读(498) 评论(0) 推荐(0) 编辑