大数据Spark技术之键值对RDD创建

1、键值对RDD的创建

2、常用的键值对RDD转换操作

3、一个综合实例

 

1、创建的两种方式

a、从文件加载

 

 b、通过并行集合来创建

 

 

2、键值对转换操作

 

 a、reduceByKey

 

 

b、groupByKey()

 

 

 

 

 

 

 

 

 

3、keys

 

 4、values

 

 5、sortByKey 默认是升序排序，false是降序排序

 

 6、sortby

 

 7、mapValues

 

 8、join 如果key相同，把value组合起来