2

一、本周完成内容与时间分配
1. 本周学习内容:完成Linux Shell全部知识点,掌握case、for、while循环;学习Hadoop简介、优势,配置SSH免密登录,部署伪分布式Hadoop,练习基础HFDS命令。
2. 学习总时长:29小时
3. 代码实操时长:15小时(批量文件处理Shell脚本、HDFS上传下载脚本)
4. 问题排查耗时:9小时(SSH密钥、Hadoop进程启动失败排错)
二、下周计划
1. 搭建完全分布式Hadoop集群;
2. 深入学习HDFS分布式文件系统架构,理解NameNode、DataNode核心作用;
3. 学习HDFS安全模式手动切换操作。
三、本周遇到的问题
1. SSH免密登录配置时主机名映射错误,导致节点间无法免密互通;
2. Hadoop启动后DataNode进程无法启动,原因是多次格式化HDFS造成集群ID不一致;
3. HDFS命令行操作分不清本地路径与分布式文件系统路径,文件上传失败。

posted @ 2026-07-24 22:39  闫子的打火石  阅读(3)  评论(0)    收藏  举报