文章分类 -  Hadoop

关于HDFS,YARN,MapReduce架构的概述
摘要：HDFS架构 1.NameNode（nn）：存储文件的元数据，入文件名，文件目录结构，文件属性（生成时间，副本数，文件权限），以及每个文件的块列表和块所在的DataNode等 2..DataNode(dn):在本地文件系统存储文件块数据，以及块数据的校验和 3.Secondary NameNode（ 阅读全文
posted @ 2019-05-19 13:17 世纪东方 阅读(146) 评论(0) 推荐(0)
关于Hadooop
摘要：什么是Hadoop 1.Hadoop是一个有Apache基金会所开发的分布式系统基础架构 2.主要解决海量数据的存储和海量数据的分析计算问题 3.广义上来说，Hadoop通常是指一个更广泛的概念——Hadoop生态圈 Hadoop组成 Hadoop1.x组成：MapReduce（计算+资源调度） H 阅读全文
posted @ 2019-05-19 12:54 世纪东方 阅读(203) 评论(0) 推荐(0)