随笔分类 -  MapReduce

下面给出一个child-parent的表格，要求挖掘其中的父子辈关系，给出祖孙辈关系的表格。
摘要：package org.apache.hadoop.examples; import java.util.HashMap; import java.io.IOException; import java.util.ArrayList; import java.util.Iterator; impor 阅读全文
posted @ 2020-12-09 09:22 Miraculous_B 阅读(1660) 评论(0) 推荐(0)
现在有多个输入文件，每个文件中的每行内容均为一个整数。要求读取所有文件中的整数，进行升序排序后，输出到一个新的文件中，输出的数据格式为每行两个整数，第一个整数为第二个整数的排序位次，第二个整数为原待排列的整数。
摘要：package org.apache.hadoop.examples; import java.util.HashMap; import java.io.IOException; import java.util.Iterator; import java.util.Map; import java 阅读全文
posted @ 2020-12-09 09:21 Miraculous_B 阅读(1897) 评论(0) 推荐(0)
对于两个输入文件，即文件A 和文件B ,请编写MapReduce程序，对两个文件进行合并排除其中重复的内容，得到一个新的输出文件C。
摘要：package org.apache.hadoop.examples; import java.util.HashMap; import java.io.IOException; import java.util.Iterator; import java.util.Map; import java 阅读全文
posted @ 2020-12-09 09:20 Miraculous_B 阅读(2393) 评论(0) 推荐(0)