摘要: 1 Hadoop 0.23.3版本1.1 Hadoop 0.20.x版本局限性Hadooop 0.23.0以前版本的HDFS是单NameNode的,有非常大的局限性1) 扩展性问题。可以随着数据量进行水平扩展,而元数据服务器不能扩展。2) 随着文件数目的增长,元数据服务器的压力变大,淘宝有现在世界上最大的单点hadoop集群,2800个。3) 文件操作的吞吐率受到单个元数据服务器的限制。4) 隔离性的问题。0.23.0以前版本,一个NameNode对应着一个唯一的Namespace,所有文件、应用、用户公用同一的名字空间。存在访问权限控制的问题。Hadoop 0.20.0 HDFS架构1.2 阅读全文
posted @ 2013-01-28 15:07 无可奈何SOS 阅读(2919) 评论(1) 推荐(1) 编辑