摘要:
# Spark:RDD的设计与运行原理 ## 1.RDD设计背景在实际应用中,存在许多迭代式算法和家忽视数据挖掘工具,这些应用场景的共同之处是,不同计算阶段之间会重用中间结果,即下一个阶段的输出结果会作为下一个阶段的输入。但是,目前的MapReduce框架都是把中间结果写入到HDFS中,带来了大量的 阅读全文
posted @ 2019-01-18 15:47
sleepnow
阅读(387)
评论(0)
推荐(0)
浙公网安备 33010602011771号