孟尧 - 博客园

2013年2月8日

摘要： 1 package com.mengyao.hadoop.mapreduce; 2 3 import java.io.IOException; 4 import java.net.URI; 5 import java.net.URISyntaxException; 6 import ... 阅读全文

posted @ 2013-02-08 19:45 孟尧阅读(404) 评论(0) 推荐(0)

MapReduce的SequenceFileOutputFormat使用

摘要： package com.mengyao.hadoop.mapreduce;import java.io.IOException;import java.text.SimpleDateFormat;import java.util.Date;import org.apache.hadoop.conf.... 阅读全文

posted @ 2013-02-08 16:44 孟尧阅读(700) 评论(0) 推荐(0)

MapReduce的DBOutputFormat使用

摘要： package com.mengyao.hadoop.mapreduce;import java.io.DataInput;import java.io.DataOutput;import java.io.IOException;import java.sql.PreparedStatement;i... 阅读全文

posted @ 2013-02-08 12:42 孟尧阅读(434) 评论(0) 推荐(1)

2013年2月7日

MapReduce的Mapper端JOIN

摘要： 1 package com.mengyao.hadoop.mapreduce; 2 3 import java.io.IOException; 4 import java.text.SimpleDateFormat; 5 import java.util.Date; 6 import... 阅读全文

posted @ 2013-02-07 14:48 孟尧阅读(343) 评论(0) 推荐(0)

MapReduce的自定义分组

摘要： 1 package com.mengyao.hadoop.mapreduce; 2 3 import java.io.IOException; 4 import java.text.SimpleDateFormat; 5 import java.util.Date; 6 7 im... 阅读全文

posted @ 2013-02-07 10:17 孟尧阅读(308) 评论(0) 推荐(0)

2013年2月6日

MapReduce的CombineFileInputFormat使用

摘要： 1 package com.mengyao.hadoop.mapreduce; 2 3 import java.io.IOException; 4 import java.util.Iterator; 5 6 import org.apache.hadoop.conf.Config... 阅读全文

posted @ 2013-02-06 23:13 孟尧阅读(621) 评论(1) 推荐(0)

MapReduce的SequenceFileInputFormat使用

摘要： 1 package com.mengyao.hadoop.mapreduce; 2 3 import java.io.IOException; 4 import java.util.Iterator; 5 6 import org.apache.hadoop.conf.Config... 阅读全文

posted @ 2013-02-06 15:05 孟尧阅读(764) 评论(1) 推荐(0)

MapReduce的NLineInputFormat使用

摘要： 1 package com.mengyao.hadoop.mapreduce; 2 3 import java.io.IOException; 4 5 import org.apache.hadoop.conf.Configuration; 6 import org.apache.... 阅读全文

posted @ 2013-02-06 00:34 孟尧阅读(893) 评论(1) 推荐(0)

2013年2月5日

MapReduce的KeyValueTextInputFormat使用

摘要： 1 package com.mengyao.hadoop.mapreduce; 2 3 import java.io.IOException; 4 5 import org.apache.hadoop.conf.Configuration; 6 import org.apache.... 阅读全文

posted @ 2013-02-05 23:17 孟尧阅读(585) 评论(1) 推荐(0)

MapReduce的自定义分区

摘要： MapReduce有4种Partitioner，如下： HashPartitioner，默认的分区。计算方法：which reducer = (key.hashCode() & Integer.MAX_VALUE) % numReduceTasks HashPar... 阅读全文

posted @ 2013-02-05 16:31 孟尧阅读(328) 评论(0) 推荐(0)

孟尧

前途宽广，贵在坚持

公告