7.23 大数据（三） Hadoop

一.大数据要解决的三大问题

1.大量数据的存储

2.大量数据的计算

3.大量数据的资源调度

二.Hadoop的第一部分HDFS组件（分布式存储）

1.原因：单台服务器存储不下，分布式不仅解决存储问题，还能解决读写速度问题

2.架构模式：中心化模式（主从模式）和去中心化模式

主从：有一个服务器可以统筹其他服务器的工作
去中心化：有特殊规则

3.架构角色：

a：NameNode：主角色，管理HDFS集群和DataNode角色
b：DataNode：从角色，负责数据的存取
c：ScondaryNameNode：辅助角色，协助NameNode处理元数据