2016年12月5日
Spark Accumulators
摘要： 概述 Accumulator即累加器，与Mapreduce counter的应用场景差不多，都能很好地观察task在运行期间的数据变化，Spark中的Accumulator各task可以对Accumulator值进行累加，但是最终的返回值只能在Driver端获取，同时原生支持Int和Double类型 阅读全文
posted @ 2016-12-05 21:53 MOBIN 阅读(3647) 评论(0) 推荐(2) 编辑