2013年7月10日
摘要: Hadoop 2.02.0中间加了一层YARN由HDFS、MapReduce和YARN三个分支构成; HDFS:NN Federation、HA;MapReduce:运行在YARN上的MR;YARN:资源管理系统YARN产生背景1.直接源于MRv1在几个方面的无能扩展性受限单点故障难以支持MR之外的计算2.多计算框架各自为战,数据共享困难MR:离线计算框架Storm:实时计算框架Spark:内存计算框架===============================================YARN基本架构ResourceManager处理客户端请求启动/监控App 阅读全文
posted @ 2013-07-10 12:45 gentlepong 阅读(412) 评论(0) 推荐(0) 编辑