zourui4271

博客园 首页 新随笔 联系 订阅 管理

2018年8月18日 #

摘要: 窄依赖指父RDD的每一个分区最多被一个子RDD的分区所用,表现为 一个父RDD的分区对应于一个子RDD的分区 两个父RDD的分区对应于一个子RDD 的分区。 宽依赖指子RDD的每个分区都要依赖于父RDD的所有分区,这是shuffle类操作 一个Job会被拆分为多组Task,每组任务被称为一个Stag 阅读全文
posted @ 2018-08-18 16:08 zourui4271 阅读(404) 评论(0) 推荐(0)