2018年9月12日
Spark配置参数的三种方式
摘要： 1.Spark 属性Spark应用程序的运行是通过外部参数来控制的，参数的设置正确与否，好与坏会直接影响应用程序的性能，也就影响我们整个集群的性能。参数控制有以下方式：（1）直接设置在SparkConf，通过参数的形式传递给SparkContext，达到控制目的。（通过set()方法传入key-va 阅读全文
posted @ 2018-09-12 15:34 知识小书包 阅读(4192) 评论(0) 推荐(0) 编辑