随笔分类 -  Hadoop

摘要:原文链接:https://blog.csdn.net/lylcore/article/details/9136555 hadooop提供了一个设置map个数的参数mapred.map.tasks,我们可以通过这个参数来控制map的个数。但是通过这种方式设置map的个数,并不是每次都有效的。原因是ma 阅读全文

posted @ 2018-05-18 22:58 林枫水湾湾 阅读(267) 评论(0) 推荐(0)

摘要:本文属于转载,原文链接:http://www.aboutyun.com/thread-7199-1-1.html前提是大家至少了解HBase的基本需求和组件。从大家最熟悉的客户端发起请求开始讲起吧,这样大家能够深有体会的逐步了解原理。比如我们发起了一条PUT请求,客户端首先需要查找到需要响应请求的R... 阅读全文

posted @ 2015-07-03 00:13 林枫水湾湾 阅读(481) 评论(0) 推荐(0)

摘要:原文链接:http://blog.chinaunix.net/uid-20196318-id-3213700.html分布式文件系统主要用于解决海量数据存储的问题,如Goolge、Facebook等大型互联网企业都使用分布式文件系统作为数据存储的基础 设施,并在其上构建很多服务,分布式文件系统通常采... 阅读全文

posted @ 2015-04-08 22:21 林枫水湾湾 阅读(800) 评论(0) 推荐(0)

导航