2016年8月15日

mapReducer程序编写过程

摘要： /* 第一步 split 有系统自动切分 第二步 map 撰写map类extemds Maper 复写Map方法； 第三步 shuffle Partion 分区，将不同信息区分的分发到不同的Reducer中 Sort 排序，按照key的不同标准判断顺序 Group 分组，按照不同的key值判断相同的 阅读全文

posted @ 2016-08-15 23:05 笑明子 阅读(529) 评论(0) 推荐(0)

hadoop2.Xeclipse插件编译

摘要： 一．简介 Hadoop2.x之后没有Eclipse插件工具，我们就不能在Eclipse 上调试代码，我们要把写好的java代码的MapReduce打包成jar然后在Linux上运行，所以这种不方便我们调试代码，所以我们自己编译一个 Eclipse插件，方便我们在我们本地上调试，经过hadoop1.x 阅读全文

posted @ 2016-08-15 11:29 笑明子 阅读(1228) 评论(0) 推荐(0)

导航