摘要:
Partition的中文意思就是分区,分片的意思,这个阶段也是整个MapReduce过程的第三个阶段,就在Map任务的后面,他的作用就是使key分到通过一定的分区算法,分到固定的区域中,给... 阅读全文
posted @ 2020-01-12 19:09
回眸,境界
阅读(155)
评论(0)
推荐(0)
摘要:
花了大约1周的时间,终于把MapReduce的5大阶段的源码学习结束掉了,收获不少,就算本人对Hadoop学习的一个里程碑式的纪念吧。今天花了一点点的时间,把MapReduce的最后一个阶... 阅读全文
posted @ 2020-01-12 19:09
回眸,境界
阅读(71)
评论(0)
推荐(0)
摘要:
上篇我刚刚学习完,Spilt的过程,还算比较简单的了,接下来学习的就是Map操作的过程了,Map和Reduce一样,是整个MapReduce的重要内容,所以,这一篇,我会好好的讲讲里面的内部实现过... 阅读全文
posted @ 2020-01-12 19:09
回眸,境界
阅读(64)
评论(0)
推荐(0)
摘要:
上篇我刚刚学习完,Spilt的过程,还算比较简单的了,接下来学习的就是Map操作的过程了,Map和Reduce一样,是整个MapReduce的重要内容,所以,这一篇,我会好好的讲讲里面的内部实现过... 阅读全文
posted @ 2020-01-12 19:09
回眸,境界
阅读(78)
评论(0)
推荐(0)
摘要:
上篇我刚刚学习完,Spilt的过程,还算比较简单的了,接下来学习的就是Map操作的过程了,Map和Reduce一样,是整个MapReduce的重要内容,所以,这一篇,我会好好的讲讲里面的内部实现过... 阅读全文
posted @ 2020-01-12 19:09
回眸,境界
阅读(81)
评论(0)
推荐(0)
摘要:
昨天经过几个小时的学习,把MapReduce的第一个阶段的过程学习了一下,也就是最最开始的时候从文件中的Data到key-value的映射,也就是InputFormat的过程。虽说过程不是很难... 阅读全文
posted @ 2020-01-12 19:09
回眸,境界
阅读(68)
评论(0)
推荐(0)
摘要:
昨天经过几个小时的学习,把MapReduce的第一个阶段的过程学习了一下,也就是最最开始的时候从文件中的Data到key-value的映射,也就是InputFormat的过程。虽说过程不是很难... 阅读全文
posted @ 2020-01-12 19:09
回眸,境界
阅读(102)
评论(0)
推荐(0)
摘要:
昨天经过几个小时的学习,把MapReduce的第一个阶段的过程学习了一下,也就是最最开始的时候从文件中的Data到key-value的映射,也就是InputFormat的过程。虽说过程不是很难... 阅读全文
posted @ 2020-01-12 19:09
回眸,境界
阅读(99)
评论(0)
推荐(0)
摘要:
继前段时间分析Redis源码一段时间之后,我即将开始接下来的一段技术学习的征程,研究的技术就是当前非常火热的Hadoop,但是一个Hadoop生态圈是非常庞大的,所以首先我的打算是挑选其中的... 阅读全文
posted @ 2020-01-12 19:09
回眸,境界
阅读(79)
评论(0)
推荐(0)
摘要:
继前段时间分析Redis源码一段时间之后,我即将开始接下来的一段技术学习的征程,研究的技术就是当前非常火热的Hadoop,但是一个Hadoop生态圈是非常庞大的,所以首先我的打算是挑选其中的... 阅读全文
posted @ 2020-01-12 19:09
回眸,境界
阅读(154)
评论(0)
推荐(0)