2018年12月8日

hadoop streaming字段排序介绍

摘要: 我们在使用hadoop streaming的时候默认streaming的map和reduce的separator不指定的话,map和reduce会根据它们默认的分隔符来进行排序 map、reduce:默认的分隔符是\t(读入数据) 得到的结果都是按第一个分隔符排序去重后的结果 假设我们的有这么一列数 阅读全文

posted @ 2018-12-08 15:32 gentleman_hai 阅读(1885) 评论(0) 推荐(0) 编辑

导航