2019年8月2日
Spark 性能调优提高任务效率
摘要： ① 搭建Spark集群的时候要给Spark集群足够的资源（core，memory） 在spark安装包的conf下spark-env.sh SPARK_WORKER_CORES --worker节点的可用核数 SPARK_WORKER_MEMORY SPARK_WORKER_INSTANCE 在提交 阅读全文
posted @ 2019-08-02 15:31 HandsomeEric 阅读(2400) 评论(0) 推荐(0) 编辑