2016年9月4日

MapReduce的输入输出

摘要: mapper和reducer的划分 mapper的数量等于输入文件被划分成的分块数,这取决于输入文件的大小以及文件块的大小。一个map操作只处理一个输入分片。运行作业的客户端通过调用getSplits()计算分片,然后将它们发送到jobtracker,jobtracker使用其存储位置信息来调度ma 阅读全文

posted @ 2016-09-04 10:17 LeonNew 阅读(843) 评论(0) 推荐(0)

导航