2017年10月21日
Mapreduce
摘要： inputformat的两种功能：数据切分功能（data splits）、记录读取器（record reader），理论上来说，一个split和一个block的大小是一致的。 map是一个进程，把split中的数据读到内存，达到百分之80的时候，开始往磁盘上写数据（小数据，命名为spill.n），在 阅读全文
posted @ 2017-10-21 16:53 hubophp 阅读(277) 评论(0) 推荐(0)