Fork me on GitHub
2021年6月22日
spark-RDD缓存,checkpoint机制,有向无环图,stage
摘要： spark-RDD缓存,checkpoint机制,有向无环图,stage 1.RDD依赖关系 RDD依赖关系有2种不同类型，窄依赖和宽依赖。 窄依赖(narrow dependency)：是指每个父RDD的Partition最多被子RDD一个Partition使用。就好像独生子女一样。窄依赖的算子包 阅读全文
posted @ 2021-06-22 17:20 是阿凯啊 阅读(425) 评论(0) 推荐(0)