2018年1月8日
Hadoop采样器实现全排序（报错java.io.EOFException）
摘要： 利用采样器，mapreducer自动将数据按照从大到小的顺序，根据数据分布的概率，自动分区到不同的区域，之前我们是手动设置分区的范围，将数据分区到不同的分区点击打开链接下面我们采用Hadoop内置类-全排序分区类进行自动分区1、mapper类package com.c... 阅读全文
posted @ 2018-01-08 12:43 crr121 阅读(240) 评论(0) 推荐(0)
Hadoop采样器实现全排序（报错java.io.EOFException）
摘要： 利用采样器，mapreducer自动将数据按照从大到小的顺序，根据数据分布的概率，自动分区到不同的区域，之前我们是手动设置分区的范围，将数据分区到不同的分区点击打开链接下面我们采用Hadoop内置类-全排序分区类进行自动分区1、mapper类package com.c... 阅读全文
posted @ 2018-01-08 12:43 crr121 阅读(452) 评论(0) 推荐(0)