摘要: HDFS架构 NameNode:负责管理和存储元数据;文件名、目录结构、文件属性(时间、副本、权限)、文件块列表,块所在DataNode(BlockId)。 DataNode:本地文件系统中存储文件块数据、块校验和。 SecondaryNameNode:定时将日志文件和镜像文件进行合并。 说明:谁启 阅读全文
posted @ 2021-05-24 23:25 yuexiuping 阅读(169) 评论(0) 推荐(0) 编辑
摘要: Hadoop框架 1.X MapReduce、HDFS、Common 2.X MapReduce、Yarn、HDFS、Common MapReduce: 1.X 计算+资源调度 2.X 计算 Yarn:资源调度 HDFS:文件存储 Common:辅助工具 Hadoop1.X 存在的问题: <1>Na 阅读全文
posted @ 2021-05-24 22:52 yuexiuping 阅读(82) 评论(0) 推荐(0) 编辑
摘要: 阅读全文
posted @ 2021-05-24 22:25 yuexiuping 阅读(43) 评论(0) 推荐(0) 编辑