MapReduce其他功能

如何获取mr当前文件名称:

//获取当前处理切片
FileSplit fileSplit = (FileSplit)context.getInputSplit();

//根据当前切片获取
String fileName = fileSplit.getPath().getNmae();
 

mr程序是否可以没有reduce阶段?

答;如果可以,全局默认一个reduceTask
        job.setNumReduceTasks(0)
解答:
    如果没有reduceTask mr会直接调用输出数据组件 tEXToutPutFormat 直接输出
part-m-000000   m表示该输出是由maptask完成的

 



posted @ 2019-09-14 20:54  DaBai的黑屋  阅读(130)  评论(0编辑  收藏  举报
Live2D