摘要: MapReduce 应用举例:单词计数 WorldCount可以说是MapReduce中的helloworld了,下面来看看hadoop中的例子worldcount对其进行的处理过程,也能对mapreduce的执行过程有一个清晰的认识,特别是对于每一个阶段的函数执行所产生的键值对 单词 计数主要完成 阅读全文
posted @ 2017-03-27 19:11 小小范同学 阅读(4137) 评论(0) 推荐(1) 编辑
摘要: 对于mapreduce这一并行计算模型,一直以来都不是很清楚其具体的执行细节,今天看了学院一位老师的实验指导书,对这一过程有了一个初步的理解,特别是map阶段和reduce阶段,所以做了一份笔记,现在上传留存; 1 MapReduce 处理过程 在 Hadoop 中,每个 MapReduce 任务都 阅读全文
posted @ 2017-03-27 15:52 小小范同学 阅读(1429) 评论(0) 推荐(0) 编辑
摘要: 一直以来,Eclipse查看源代码都十分的方便,比方说我们按住ctrl,然后鼠标点击某一个类便会跳转到相应类的定义当中,但是这里面必须涉及到的一个东西是你必须在之前就将自己的这个类的源代码关联上去才行;如果事先没有做这个工作,将会导致source not find这个鬼东西;所以下面来看看如何关联源 阅读全文
posted @ 2017-03-27 15:19 小小范同学 阅读(359) 评论(0) 推荐(0) 编辑