hadoop动态增删节点
增加机器:
1、将新增加的机器配置好(jdk/hosts/hadoop里的配置文件)
2、将新增加的机器主机名/IP添加到Master机器中的$HADOOP_HOME$/conf/slaves文件中
3、在新增加的机器中输入以下命令
引用
$ cd path/to/hadoop
$ bin/hadoop-daemon.sh start datanode
$ bin/hadoop-daemon.sh start tasktracker
4、在Master机器上输入以下命令
引用
$bin/hadoop balancer
减少机器:
1、在$HADOOP_HOME$/conf/中建立文本文件excludes。
2、在excludes中写入要删除的机器主机名/IP(每行一个)。
3、在$HADOOP_HOME$/conf/hadoop-site.xml文件中添加如下代码:
引用
<property>
<name>dfs.hosts.exclude</name>
<value>excludes</ value>
</property>
4、执行如下代码
引用
$bin/hadoop dfsadmin -refreshNodes
【推荐】2025 HarmonyOS 鸿蒙创新赛正式启动,百万大奖等你挑战
【推荐】博客园的心动:当一群程序员决定开源共建一个真诚相亲平台
【推荐】开源 Linux 服务器运维管理面板 1Panel V2 版本正式发布
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步