暑假第五周总结

本周我开始学习hadoop框架

首先我了解到分布式系统的组织形式，以及Hadoop服从主从模式的框架架构

 接着开始学习HDFS基础架构

 HDFS架构属于主从模式，一个主节点和多个分节点

 在了解完HDFS架构之后，我开始试着部署HDFS架构

在经过几个小时的努力下，最终成功部署成功，能够一键启动HDFS集群

 

主要关键步骤为：

部署Hadoop的关键点
1. 上传、解压到/export/server，配置软链接
2. 修改4份配置文件
workers
hadoop-env.sh
core-site.xml
hdfs-site.xml
3. 分发到node2、node3，并设置环境变量
4. 创建数据目录，并修改文件权限归属hadoop账户
5. 启动，并查看WEB UI

我会在接下来的博客中详细介绍如何部署HDFS集群，以及我遇到的一系列问题