寒假学习笔记12

文件的存取都是在hdfs内完成

（一）数据去重：

程序：

 

操作：

结果：

 

（二）求平均值

程序：

 

 操作：

 

 结果：