2018年7月21日
hadoop InputFormat getSplits
摘要： /** Splits files returned by {@link #listStatus(JobConf)} when * they're too big.*/ public InputSplit[] getSplits(JobConf job, int numSplits) throws IOException { //计时器， StopWatch ... 阅读全文
posted @ 2018-07-21 15:17 天添 阅读(612) 评论(0) 推荐(0)
hadoop LineRecordReader
摘要： /** * * @param job 配置信息 * @param split split * @param recordDelimiter 分列的字符 * @throws IOException */ public LineRecordReader(Configuration job, FileSplit split, byte[] r... 阅读全文
posted @ 2018-07-21 13:02 天添 阅读(723) 评论(0) 推荐(0)