2024年1月12日
学习笔记3
摘要： RDD概念/特性许多迭代式算法（比如机器学习、图算法等）和交互式数据挖掘工具，共同之处是不同计算阶段之间会重用中间结果， MapReduce框架把中间结果写入到稳定存储（如磁盘）中，带来大量的数据复制、磁盘IO和序列化开销。 RDD就是为了满足这种需求而出现的，它提供了一个抽象的数据架构，开发者不必 阅读全文
posted @ 2024-01-12 22:24 lcz111 阅读(35) 评论(0) 推荐(0)