摘要: 学习一个新框架方法: 推荐:官网+源码 跪在坚持 hadoop.apache.org spark.apache.org flink.apache.org storm.apache.org Hadoop:由HDFS/YARN/Map Reduce构成 HDFS 一个NameNode 和多个DATa N 阅读全文
posted @ 2020-02-21 17:13 贾江浦 阅读(177) 评论(0) 推荐(0) 编辑
摘要: Hadoop1.X和Hadoop2.X区别 Hadoop2.x中有俩个重要的变更: a.HDFS的NameNode可以 以几群的方式部署,增强了NameNode的水平扩展能力和可用性 b.MapReduce将JobTrack中的资源管理器及生命周期管理(包括定时触发及监控),拆分成俩个独立的组件,并 阅读全文
posted @ 2020-02-21 15:10 贾江浦 阅读(113) 评论(0) 推荐(0) 编辑
摘要: NameNode是什么? Namenode是一个通常在HDFS实例中的单独机器上运行的软件。它负责管理文件系统名称空间和控制外部客户机的访问。Namenode决定是否将文件映射到DataNode上的复制块上。对于最常见的3个复制块,第一个复制块存储在同一机架的不同节点上,最后一个复制块存储在不同机架 阅读全文
posted @ 2020-02-21 11:39 贾江浦 阅读(610) 评论(0) 推荐(0) 编辑