2017年11月15日
用 spark-submit 启动应用
摘要： 用 spark-submit 启动应用 如果用户的应用程序被打包好了，它可以使用 bin/spark-submit 脚本来启动。这个脚本负责设置 Spark 和它的依赖的 classpath，并且可以支持 Spark 所支持的不同的 Cluster Manager 以及 deploy mode（部署 阅读全文
posted @ 2017-11-15 09:14 gyhuminyan 阅读(372) 评论(0) 推荐(0)
Using Spark's "Hadoop Free" Build
摘要： Spark uses Hadoop client libraries for HDFS and YARN. Starting in version Spark 1.4, the project packages “Hadoop free” builds that lets you more easi 阅读全文
posted @ 2017-11-15 09:06 gyhuminyan 阅读(284) 评论(0) 推荐(0)