cxzdy

摘要： 转自：http://www.cnblogs.com/cenyuhai/p/3708135.html HBase 系统架构图 组成部件说明 Client： 使用HBase RPC机制与HMaster和HRegionServer进行通信 Client与HMaster进行通信进行管理类操作 Client与 阅读全文

摘要： 转自：http://www.aboutyun.com/thread-7569-1-1.html 大数据我们都知道hadoop，可是还会各种各样的技术进入我们的视野：Spark，Storm，impala，让我们都反映不过来。为了能够更好的架构大数据项目，这里整理一下，供技术人员，项目经理，架构师选择合 阅读全文

摘要： 转自：http://blog.csdn.net/luyee2010/article/details/8624470 一、从Map到Reduce MapReduce其实是分治算法的一种实现，其处理过程亦和用管道命令来处理十分相似，一些简单的文本字符的处理甚至也可以使用Unix的管道命令来替代，从处理流 阅读全文

摘要： 转自：http://blog.csdn.net/chlaws/article/details/16918913在HBase中，大部分的操作都是在RegionServer完成的，Client端想要插入，删除，查询数据都需要先找到相应的RegionServer。什么叫相应的RegionServer？就是... 阅读全文

摘要： 转自：http://www.cnblogs.com/ggjucheng/archive/2013/01/03/2842860.html在做Shuffle阶段的优化过程中，遇到了数据倾斜的问题，造成了对一些情况下优化效果不明显。主要是因为在Job完成后的所得到的Counters是整个Job的总和，优化... 阅读全文

摘要： 转自：http://blog.csdn.net/heyutao007/article/details/5890103mr自带的例子中的源码SecondarySort，我重新写了一下，基本没变。这个例子中定义的map和reduce如下，关键是它对输入输出类型的定义：（java泛型编程）public s... 阅读全文

摘要： ZooKeeper: ZooKeeper浅析：http://www.cnblogs.com/sharpxiajun/archive/2013/06/02/3113923.html ZooKeeper原理及使用：http://www.wuzesheng.com/?p=2609#more-2609 Zo 阅读全文

摘要： 转自：http://blog.csdn.net/colorant/article/details/20608157版权声明：本文为博主原创文章，未经博主允许不得转载。作者：刘旭晖 Raymond 转载请注明出处Email：colorant at 163.comBLOG：http://blog.csd... 阅读全文

摘要： 转自：http://www.iteblog.com/archives/1183Spark目前被越来越多的企业使用，和Hadoop一样，Spark也是以作业的形式向集群提交任务，那么在内部实现Spark和Hadoop作业模型都一样吗？答案是不对的。 熟悉Hadoop的人应该都知道，用户先编写好一个程... 阅读全文

摘要： 转自：http://www.cnblogs.com/RuiLei/archive/2008/11/09/1329905.html最近学习spark，scala，感觉lambda，委托，匿名方法等对于scala的学习很有帮助，很多东西都感觉能融合，但好久没写lambda表达式了，生疏。1、查询Stud... 阅读全文