2023年11月4日
Hadoop-3.3.3分布式集群的文件配置，配置启动hadoop历史服务和启动日志聚集
摘要： 一、分布式集群的文件配置 涉及$HADOOP_HOME/etc/hadoop路径下的5个文件 workers、core-site.xml、hdfs-site.xml、mapred-site.xml、yarn-site.xml 个人的配置 hadoop100 hadoop102 hadoop103 首 阅读全文
posted @ 2023-11-04 16:52 Evelynlb 阅读(160) 评论(0) 推荐(0)
虚拟机集群ssh配置免密登录
摘要： 在dn节点机首先安装ssh，没有就执行以下代码 sudo apt-get install openssh-server 然后 cd ~/.ssh 如果没有该路径就执行一次 ssh localhost 然后执行以下代码，删除之前可能生成过的私钥，公钥 rm ./id_rsa* 执行以下代码，然后三次回 阅读全文
posted @ 2023-11-04 14:07 Evelynlb 阅读(124) 评论(0) 推荐(0)
hadoop 将nn节点的环境配置同步到dn节点
摘要： 使用scp命令克隆配置 输入 sudo scp -r jdk1.8.0_391/ hxf@slaver2:/opt/module 报错ssh: Could not resolve hostname hxf: Temporary failure in name resolution lost conn 阅读全文
posted @ 2023-11-04 01:49 Evelynlb 阅读(54) 评论(0) 推荐(0)
Finalshell给虚拟机安装JDK1.8，hadoop-3.3.3，hive3.1.2并配置环境
摘要： 点击红框按钮，把下载好的jdk，hadoop，hive安装包上传到指定路径 我的路径是/home/用户名/Downloads 查看上传文件 sudo tar -zxvf /home/hxf/Downloads/jdk-8u391-linux-x64.tar.gz -C /opt/module/ su 阅读全文
posted @ 2023-11-04 00:11 Evelynlb 阅读(397) 评论(0) 推荐(0)