Spark中RDD的粗粒度和细粒度操作
粗粒度:针对整个数据集进行转换操作,而不是针对数据集中的某个元素进行转换操作
细粒度:针对数据集中的某个元素进行转换操作
Spark中:
- 读操作:可以是粗粒度,也可以是细粒度
- 写操作:粗粒度
https://www.jianshu.com/p/c43cd6a5538d
粗粒度:针对整个数据集进行转换操作,而不是针对数据集中的某个元素进行转换操作
细粒度:针对数据集中的某个元素进行转换操作
Spark中:
https://www.jianshu.com/p/c43cd6a5538d