2025年4月9日
HDFS & YARN & MapReduce
摘要： HDFS Hadoop Distributed File System，简称 HDFS，是一个分布式文件系统。 NameNode(nn)：存储文件的元数据，如文件名，文件目录结构，文件属性(生成时间、副本数、文件权限)，以及每个文件的块列表和块所在的DataNode等； DataNode(dn)：在 阅读全文
posted @ 2025-04-09 22:26 *一炁化三清* 阅读(18) 评论(0) 推荐(0)
HDFS
摘要： 大数据 大数据 (Big Data)指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。 大数据主要解决，海量数据的采集、存储和分析计算问题。 1、核心组件 (1) HDFS（Hadoo 阅读全文
posted @ 2025-04-09 16:17 *一炁化三清* 阅读(30) 评论(0) 推荐(0)