2021 年 6月 25 日随笔档案 - rananie

2021年6月25日

摘要：常见错误及解决方案 ResourceManager连接失败 INFO client.RMProxy: Connecting to ResourceManager at hadoop108/192.168.10.108:8032 可能原因 1.防火墙没关闭 2.没有启动YARN root用户和rana 阅读全文

posted @ 2021-06-25 22:17 rananie 阅读(604) 评论(0) 推荐(0)

Hadoop入门集群时间同步

摘要：集群时间同步 **如果服务器在公网环境(能连接外网)，可以不采用集群时间同步。**因为服务器会定期和公网时间进行校准。如果服务器在内网环境，必须要配置集群时间同步，否则时间久了，会产生时间偏差，导致集群执行任务时间不同步。时间服务器配置(必须root用户) 首先需要设置一个时间服务器作为基准，其阅读全文

posted @ 2021-06-25 21:48 rananie 阅读(141) 评论(0) 推荐(0)

Hadoop入门集群常用知识与常用脚本总结

摘要：集群常用知识与常用脚本总结集群启动/停止方式 ###1 各个模块分开启动/停止(常用) 配置ssh是前提整体启动/停止HDFS [ranan@hadoop102 hadoop-3.1.3]$ sbin/start-dfs.sh [ranan@hadoop102 hadoop-3.1.3]$ sb 阅读全文

posted @ 2021-06-25 11:44 rananie 阅读(228) 评论(0) 推荐(0)

Hadoop入门完全分布式运行模式-集群配置

摘要：集群配置现在各个服务器的准备工作已经做好了，但是Hadoop之间是没有任何关系的集群部署规划 1.NameNode和SecondaryNameNode不要安装在同一台服务器，因为都耗内存。 2.ResourceManager也很小号内存，不要和NameNode、SecondaryNameNode 阅读全文

posted @ 2021-06-25 10:47 rananie 阅读(416) 评论(0) 推荐(0)

公告