随笔分类 -  Spark

Spark on Yarn运行机制
摘要：一、Spark 相关术语 Driver（通常用 SparkContext 代表 Drive）：表示运行 Application的main() 函数，并创建 SparkContext。其中创建 SparkContext 的目的是为了准备 Spark 应用程序的运行环境。在 Spark 中由 Spark 阅读全文
posted @ 2021-07-23 13:05 民宿 阅读(370) 评论(0) 推荐(0)