07 2024 档案

摘要:一、上传hadoop安装包到hdp-01集群任一节点(master) tar -zxvf 软件包 -C 指定安装文件夹 二、修改配置文件 1.指定Hadoop的默认文件系统为hdfs 2.指定hdfs的namenode节点为哪台机器 3.指定namenode软件存储元数据的本地目录 4.指定data 阅读全文
posted @ 2024-07-30 22:49 chrisrmas、 阅读(22) 评论(0) 推荐(0)
摘要:hadoop的概念还没有完全了解完全,但是它的核心是处理和存储大数据,需要在虚拟机上面进行系统的测试 阅读全文
posted @ 2024-07-30 21:56 chrisrmas、 阅读(8) 评论(0) 推荐(0)
摘要:1、执行yum命令报404错误1)检查yum仓库是否配置正确,可以到阿里云下载repo配置文件。 wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repo2)如果报错中包含$relea 阅读全文
posted @ 2024-07-26 21:22 chrisrmas、 阅读(218) 评论(0) 推荐(0)
摘要:Hadoop是一种用于存储和处理大数据的开源软件框架,它采用分布式文件系统和MapReduce编程模型,可以有效地处理海量数据。在学习Hadoop的过程中,我掌握了许多重要的知识和技能,以下是我的Hadoop学习总结: 首先,我学会了Hadoop的核心概念和架构。Hadoop由HDFS(分布式文件系 阅读全文
posted @ 2024-07-24 20:53 chrisrmas、 阅读(40) 评论(0) 推荐(0)
摘要:这一周学习了hadoop,上午上小学期,下午上hadoop,我先了解了学习hadoop的作用以及必要性,学习Hadoop是进入大数据领域的重要一步。Hadoop作为一个开源的分布式存储和计算框架,其强大的数据处理能力和可靠性使其在大数据处理中得到广泛应用。 首先,Hadoop的核心组件包括HDFS和 阅读全文
posted @ 2024-07-13 21:31 chrisrmas、 阅读(25) 评论(0) 推荐(0)