2019年12月11日
大数据学习day23-----spark06--------1. Spark执行流程（知识补充：RDD的依赖关系）2. Repartition和coalesce算子的区别 3.触发多次actions时，速度不一样 4. RDD的深入理解（错误例子，RDD数据是如何获取的）5 购物的相关计算
摘要： 1. Spark执行流程 知识补充：RDD的依赖关系 RDD的依赖关系分为两类：窄依赖（Narrow Dependency）和宽依赖(Shuffle Dependency) （1）窄依赖 窄依赖指的是父RDD中的一个分区最多只会被子RDD中的一个分区使用，意味着父RDD的一个分区内的数据是不能被分割 阅读全文
posted @ 2019-12-11 11:37 一y样 阅读(491) 评论(0) 推荐(0)