4.RDD操作

1、从本地文件系统中加载数据创建RDD

2、从HDFS加载数据创建RDD

 

HDFS加载数据创建RDD

停止hdfs

3、通过并行集合(列表)创建RDD、输入列表、字符串、生成数组

 

2. RDD操作

1.转换操作

(1)filter(func)

(2)map(func)

 

(3)flatMap(func)

 

(4)reduceByKey(func)

 

(5)grounpByKey()

 

(6)sortByKey和sorBy(func)

(7)RDD写入文本文件

行动操作

 

posted @ 2022-03-18 00:40  anonyme=  阅读(15)  评论(0编辑  收藏  举报