摘要: 联盟实际上是一个单独的集群,集群里面包含很多的NameService共享同样的DataNode,同一份数据只上传一份,block块相同,一个集群中删除,另一个集群中还是存在的.同一份数据只是在namespace中注册了一下.联盟是共享同一个datanode,相同的数据还是一份viewfs跨隶属于同一... 阅读全文
posted @ 2015-08-29 15:12 小丁子 阅读(282) 评论(0) 推荐(0) 编辑
摘要: yarn包括两块,一个是ResourceManager,主要的作用是管理集群上的资源,目前hadoop版本上,管理的只有cpu和内存. 另外一个叫NodeManager,这上面会跑我们的程序,叫ApplicationMaster,我们的MapReduce在上面的跑的不叫做Application... 阅读全文
posted @ 2015-08-29 15:01 小丁子 阅读(539) 评论(0) 推荐(0) 编辑
摘要: 自动切换的HA,比手动切换HA集群多了一个zookeeper集群机器分配: zookeeper:hadoop4,hadoop5,hadoop6 namenode:hadoop4,hadoop5 datanode:hadoop4,hadoop5,hadoop6 journalnode:hado... 阅读全文
posted @ 2015-08-29 13:13 小丁子 阅读(234) 评论(0) 推荐(0) 编辑