2018年5月9日
SPARK：作业基本运行原理
摘要： Spark作业基本运行原理： 我们使用spark-submit提交一个spark作业之后，这个作业就会启动一个对应的Driver进程。根据你使用的部署模式（deploy-mode）不同：1）Driver进程可能在本地启动，也可能在集群中的某个工作节点上启动；2）Driver进程本身会根据我们设置的参 阅读全文
posted @ 2018-05-09 14:48 cctext 阅读(625) 评论(0) 推荐(0)