回眸,境界 - 博客园

摘要： Partition的中文意思就是分区，分片的意思，这个阶段也是整个MapReduce过程的第三个阶段，就在Map任务的后面，他的作用就是使key分到通过一定的分区算法，分到固定的区域中，给... 阅读全文

posted @ 2020-01-12 19:09 回眸,境界阅读(155) 评论(0) 推荐(0)

摘要：从今天开始，本人将会开始对另一项技术的学习，就是当下炙手可热的Hadoop分布式就算技术。目前国内外的诸多公司因为业务发展的需要，都纷纷用了此平台。国内的比如BAT啦，国外的在这方面走的更加的前... 阅读全文

posted @ 2020-01-12 19:09 回眸,境界阅读(54) 评论(0) 推荐(0)

posted @ 2020-01-12 19:09 回眸,境界阅读(64) 评论(0) 推荐(0)

摘要：在Redis服务端的代码量真的是比较大，如果一个一个API的学习怎么实现，无疑是一种效率很低的做法，所以我今天对服务端的实现代码的学习，重在他的执行流程上，而对于他的模块设计在上一篇中我已经分析过了... 阅读全文

posted @ 2020-01-12 19:09 回眸,境界阅读(94) 评论(0) 推荐(0)

摘要：花了大约1周的时间，终于把MapReduce的5大阶段的源码学习结束掉了，收获不少，就算本人对Hadoop学习的一个里程碑式的纪念吧。今天花了一点点的时间，把MapReduce的最后一个阶... 阅读全文

posted @ 2020-01-12 19:09 回眸,境界阅读(72) 评论(0) 推荐(0)

摘要： JobTracker的作业调度给我感觉就是比较宏观意义上的操作。倘若你只了解了MapReduce的工作原理是远远不够的，这时去学习一下他在宏观层面的原理实现也是对我们非常有帮助的。首先我们又得从上... 阅读全文

posted @ 2020-01-12 19:09 回眸,境界阅读(90) 评论(0) 推荐(0)

posted @ 2020-01-12 19:09 回眸,境界阅读(99) 评论(0) 推荐(0)

posted @ 2020-01-12 19:09 回眸,境界阅读(162) 评论(0) 推荐(0)

摘要：今天在看排序算法的时候，看到了用位示图法实现的，上面说可以大大减少内存的使用，尤其针对大数据的存储，数据量非常大的的时候，他的优点就比较明显了，因为他存储数据值依靠1个位来表示。具体是怎么回事... 阅读全文

posted @ 2020-01-12 19:09 回眸,境界阅读(150) 评论(0) 推荐(0)

posted @ 2020-01-12 19:09 回眸,境界阅读(137) 评论(0) 推荐(0)

Tippy