摘要: 一、背景天云趋势在2012年下半年开始为某大型国有银行的历史交易数据备份及查询提供基于Hadoop的技术解决方案,由于行业的特殊性,客户对服务的可用性有着非常高的要求,而HDFS长久以来都被单点故障的问题所困扰,直到Apache Hadoop在2012年5月发布了2.0的alpha版本,其中MRv2还很不成熟,可HDFS的新功能已经基本可用,尤其是其中的的High Availability(以下简称HA)和Federation。Cloudera也于7月制作了CDH4.0.1,包含了Hadoop 2.0的诸多新功能和组件,于是我们就基于CDH4.0.1进行了HA和Federation的测试。二、 阅读全文
posted @ 2014-01-21 17:29 飘荡小黄鸭 阅读(178) 评论(0) 推荐(0) 编辑
摘要: 具体参考:http://f.dataguru.cn/thread-173335-1-1.htmlhttp://www.infoq.com/cn/articles/hadoop-2-0-namenode-ha-federation-practice-zhhttp://mmicky.blog.163.com/blog/static/150290154201401812127758/ 阅读全文
posted @ 2014-01-21 16:44 飘荡小黄鸭 阅读(160) 评论(0) 推荐(0) 编辑
摘要: 在计算机技术中,虚拟化(Virtualization) 是将计算机物理资源如服务器、网络、内存及存储等予以抽象、转换后呈现出来,使用户可以比原本的组态更好的方式来应用这些资源。这些资源的新虚拟部份是不 受现有资源的架设方式,地域或物理组态所限制。一般所指的虚拟化资源包括计算能力和资料储存。 需要注意的是虚拟化并不等同于云计算,虚拟化只是庞大的云计算生态圈中一个子应用。Hypervisor 在介绍具体的虚拟化技术之前,我们首先要来说一说计算机是如何进行虚拟化的。其中不得不提Hypervisor: Hypervisor是用来创建和运行虚拟机的软件,固件或硬件。运行Hypervisor的电... 阅读全文
posted @ 2014-01-21 10:52 飘荡小黄鸭 阅读(699) 评论(0) 推荐(0) 编辑