4.RDD操作

一.RDD创建

1.从文件系统中加载数据创建RDD

 

  2.从HDFS加载数据创建RDD

 

 

 

 

 

 

 

 

 

 

 

3.通过并行集合(列表)创建RDD

 

 二、 RDD操作

1.转换操作

   1.filter(func)
     

 

 

 

 2.map(func)

 

 3.flatMap(func)

 

 4.reduceByKey()

 

 

 

 

 

 5.groupByKey()

 

 

 

 

 

 6.sortByKey()

 

 7.sortBy()

 

posted @ 2022-03-28 19:36  上上签c  阅读(7)  评论(0编辑  收藏  举报