hadoop动态增删节点
增加机器:
1、将新增加的机器配置好(jdk/hosts/hadoop里的配置文件)
2、将新增加的机器主机名/IP添加到Master机器中的$HADOOP_HOME$/conf/slaves文件中
3、在新增加的机器中输入以下命令
引用
$ cd path/to/hadoop
$ bin/hadoop-daemon.sh start datanode
$ bin/hadoop-daemon.sh start tasktracker
4、在Master机器上输入以下命令
引用
$bin/hadoop balancer
减少机器:
1、在$HADOOP_HOME$/conf/中建立文本文件excludes。
2、在excludes中写入要删除的机器主机名/IP(每行一个)。
3、在$HADOOP_HOME$/conf/hadoop-site.xml文件中添加如下代码:
引用
<property>
<name>dfs.hosts.exclude</name>
<value>excludes</ value>
</property>
4、执行如下代码
引用
$bin/hadoop dfsadmin -refreshNodes
【推荐】100%开源!大型工业跨平台软件C++源码提供,建模,组态!
【推荐】AI 的力量,开发者的翅膀:欢迎使用 AI 原生开发工具 TRAE
【推荐】2025 HarmonyOS 鸿蒙创新赛正式启动,百万大奖等你挑战