摘要: 在 Spark 的 bin 目录中的 spark-submit 脚本用与在集群上启动应用程序。它可以通过一个统一的接口使用所有 Spark 支持的 Cluster Manager,所以您不需要专门的为每个 Cluster Manager 来配置您的应用程序。 在 Spark 的 bin 目录中的 s 阅读全文
posted @ 2017-12-04 20:34 大葱拌豆腐 阅读(282) 评论(0) 推荐(0)
摘要: 组件 Spark 应用在集群上作为独立的进程组来运行,在您的 main 程序中通过 SparkContext 来协调(称之为 driver 程序)。 具体的说,为了运行在集群上,SparkContext 可以连接至几种类型的 Cluster Manager(既可以用 Spark 自己的 Standl 阅读全文
posted @ 2017-12-04 20:12 大葱拌豆腐 阅读(541) 评论(0) 推荐(0)