2025.1.18(寒假第十一天)

第十一天:完成查重任务

上学期大数据有一个期末作业在做一遍。

实验目的:明确实验的目标和意义。
实验内容:详细描述实验过程和代码实现。
实验结果:展示实验的输出结果。
实验总结:总结实验过程中的收获和不足.

(一)编程实现文件合并和去重操作

对于两个输入文件,即文件A和文件B,请编写MapReduce程序,对两个文件进行合并,并剔除其中重复的内容,得到一个新的输出文件C。下面是输入文件和输出文件的一个样例供参考。

 

然后编写代码

 最后输出运行即可

 完成了实验报告的撰写和提交。
通过实验报告的撰写,进一步巩固了实验内容和学习成果。

 

posted @ 2025-01-18 09:24  kuku睡  阅读(7)  评论(0)    收藏  举报