hadoop学习(1)
(1)本周安装Hadoop总结:
本周我花了20小时来学习和安装Hadoop。
学习阶段占用了10小时,我主要关注Hadoop的安装和配置文档,以了解所需的步骤和概念。
安装和配置Hadoop集群花费了5小时,包括设置各个节点以及Hadoop环境的调优。
在解决问题方面,我花了5小时来应对在安装和配置过程中遇到的各种问题,包括网络设置、权限问题等。
(2)下周计划:
下周我计划继续研究Hadoop集群的管理和维护,以确保其正常运行。并在Hadoop集群上运行示例作业,配置方便快捷命令,进一步了解hadoop运行机制,以及使用方法。
(3)本周遇到的问题:
在安装Hadoop时,我遇到了一些与Java环境变量和版本相关的问题。这导致我花了一些时间来调整和更新我的Java配置。
在配置Hadoop集群时,我还遇到了一些关于节点间通信和文件权限的问题,关于配置错误在重新一步一步返回返回原始状态,是一个复杂的过程。
另外,我也遇到了一些网络配置问题,影响了集群中节点的通信,需要进行一些网络设置的调整。