4.RDD操作

1.从本地文件系统中加载数据创建RDD

 

2.从HDFS加载数据创建RDD

启动hdfs

上传文件

 

 查看文件

 

加载

 

 停止hdfs

 

 

3.通过并行集合(列表)创建RDD

 输入列表、字符串、生成数组

 

 

二、 RDD操作

转换操作

  

1.转换操作

(1)filter(func)

 

 

 

(2)map(func)

 

(3)flatMap(func)

 

(4)reduceByKey(func)

 

 

(5)grounpByKey()

 

 

(6)sortByKey和sorBy(func)

 

 

 

 (7)RDD写入文本文件

行动操作

posted @ 2022-03-26 23:39  一起打羽毛球呀  阅读(13)  评论(0编辑  收藏  举报