05 2014 档案

NameNode中的FSImage文件
摘要：第一：结构1：下图是FSImage数据结构图以看出，fsimage保存有如下信息：1.首先是一个imagehead，其中包含：a)imgVersion(int)：当前image的版本信息b)namespaceID(int)：用来确保别的HDFSinstance中的datanode不会误连上当前NN。... 阅读全文
posted @ 2014-05-22 12:00 miner007 阅读(5010) 评论(0) 推荐(1)
MapReduce之InputFormat和OutFormat
摘要：详细情况见：http://shitouer.cn/2013/02/hadoop-source-code-analyse-mapreduce-inputformat/http://blog.sina.com.cn/s/blog_4a064aed01011lja.html以下是对此2网址的学习：Inpu... 阅读全文
posted @ 2014-05-20 21:43 miner007 阅读(407) 评论(0) 推荐(0)
MapReduce之浅析Map接口和Reduce接口
摘要：import java.io.IOException;import java.util.StringTokenizer;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Path;import org.ap... 阅读全文
posted @ 2014-05-20 14:52 miner007 阅读(2956) 评论(0) 推荐(0)