4.RDD操作

1.从本地文件系统中加载数据创建RDD

 

2.从HDFS加载数据创建RDD

启动hdfs

上传文件

 

 查看文件

 

加载

 

 停止hdfs

 

 

3.通过并行集合（列表）创建RDD

 输入列表、字符串、生成数组

 

 

二、 RDD操作

转换操作

　　

1.转换操作

（1）filter(func)

 

 

 

（2）map(func)

 

(3)flatMap(func)

 

(4)reduceByKey(func)

 

 

(5)grounpByKey()

 

 

(6)sortByKey和sorBy(func)

 

 

 

 (7)RDD写入文本文件

行动操作