3

一、本周完成内容与时间分配
1. 本周学习内容:搭建三节点完全分布式Hadoop集群;系统学习HDFS架构、数据块存储机制;掌握NameNode、SecondaryNameNode工作原理,手动切换集群安全模式。
2. 学习总时长:32小时
3. 代码实操时长:14小时(集群启停Shell脚本、HDFS批量文件管理脚本)
4. 问题排查耗时:11小时(集群主机互通、节点进程失联故障处理)

二、下周计划
1. 学习HDFS-HA高可用架构,弄懂自动故障转移机制;
2. 开始YARN资源调度框架学习,梳理ResourceManager、NodeManager核心概念;
3. 编写脚本监控HDFS集群存储使用率。

三、本周遇到的问题
1. 完全分布式集群节点时钟不同步,DataNode频繁掉线;
2. 手动进入安全模式后无法正常退出,存储块副本丢失导致集群只读;
3. NameNode镜像文件与编辑日志文件的合并流程理解困难,需要反复查阅文档。

posted @ 2026-08-06 22:52  闫子的打火石  阅读(5)  评论(0)    收藏  举报