2016年11月3日
spark参数调优
摘要： 摘要 　　1.num-executors 　　2.executor-memory 　　3.executor-cores 　　4.driver-memory 　　5.spark.default.parallelism 　　6.spark.storage.memoryFraction 　　7.spark.shuffle.memoryFraction 　　8.资源参数参考示例 阅读全文
posted @ 2016-11-03 23:04 混沌战神阿瑞斯 阅读(14013) 评论(0) 推荐(3) 编辑
Spark的持久化简记
摘要： 摘要： 　　1.spark 提供的持久化方法 　　2.Spark的持久化级别 　　3.如何选择一种最合适的持久化策略 阅读全文
posted @ 2016-11-03 21:47 混沌战神阿瑞斯 阅读(1024) 评论(0) 推荐(1) 编辑