摘要: 集群时间同步 为了使三台服务器的时间一致,而且服务器没有连接外网的话,需要进行集群时间同步。一般虚拟机的时间是同步的,所以这个过程我们不需要配置。 下面开始学习Hadoop_HDFS hdfs解决海量问题的存储问题,是一个文件系统。用来存储文件,通过目录树来定位文件,分布式的,适合一次写入,多次读出 阅读全文
posted @ 2022-08-11 22:12 信2005-2赵磊 阅读(18) 评论(0) 推荐(0)
摘要: 一些命令 各个模块分开启动/停止(配置SSH是前提) 整体启动/停止HDFS start-dfs.sh/stop-dfs.sh 2.整体启动/停止YARN start-yarn.sh/stop-yarn.sh 各个服务组件逐一启动/停止 分别启动/停止HDFS组件 hdfs --daemon sta 阅读全文
posted @ 2022-08-11 09:14 信2005-2赵磊 阅读(87) 评论(0) 推荐(0)
摘要: 配置日志的聚集(图片是错误的,导致找了好长时间的错误) yarn-site.xml文件 <!--开启日志聚合--><property> <name>yarn.log-aggregation-enable</name> <value>true</value></property> <!--设置日志聚集 阅读全文
posted @ 2022-08-11 09:13 信2005-2赵磊 阅读(22) 评论(0) 推荐(0)
摘要: 配置历史服务器 配置mapred-site.xml文件 <!--历史服务器地址--><property> <name>mapreduce.jobhistory.address</name> <value>hadoop102:10020</value></property> <!--指定历史服务器we 阅读全文
posted @ 2022-08-11 09:08 信2005-2赵磊 阅读(21) 评论(0) 推荐(0)