摘要: 原 Hadoop MapReduce 框架的问题 原hadoop的MapReduce框架图 从上图中可以清楚的看出原 MapReduce 程序的流程及设计思路: 可以看得出原来的 map-reduce 架构是简单明了的,在最初推出的几年,也得到了众多的成功案例,获得业界广泛的支持和肯定,但随着分布式 阅读全文
posted @ 2016-10-29 10:19 wj_hubei 阅读(3415) 评论(1) 推荐(2)
摘要: 一、前言 临近毕业(2017年6月),所以果断于国庆后投入到了校招大军中,这段时间面试了5家公司(基本上都是多轮面试),也算小有收获吧。下面将一些面试过程碰到的知识点分享给大家,希望对看到本文的朋友多少有些帮助。 顺带提一句,我投递的岗位是Java研发类的。 二、遇到的知识点 Java相关知识 多线 阅读全文
posted @ 2016-10-29 01:04 wj_hubei 阅读(188) 评论(0) 推荐(0)
摘要: 本文仍然使用MapReduce的经典例子 WordCount来测试eclipse的开发环境。 与大部分教程不同的是,本文使用的hadoop是2.5.2的版本,相较于之前的0.X版本,hadoop 2.X有较大改动 在jar包方面,Hadoop 2.x 版本中 jar 不再集中在一个 hadoop-c 阅读全文
posted @ 2016-10-29 00:44 wj_hubei 阅读(710) 评论(0) 推荐(1)