Hdfs存储负载均衡调整

查看节点hdfs文件负载

查看各节点hdfs文件使用情况：hdfs dfsadmin -report

hdfs dfsadmin -report > balance
cat balance | grep "DFS Used%"
cat balance | grep "Name"

负载均衡

查出上边各个节点使用率，将使用率高的和使用率低的做一个负载均衡
将corehadoop04,corehadoop19,corehadoop20,corehadoop21,corehadoop22,corehadoop23,corehadoop24,corehadoop25节点做个负载均衡

[hdfs@corehadoop04 tools]$ cat hdfs_balance.sh 
hdfs dfsadmin -fs hdfs://cluster01:8020 -setBalancerBandwidth 6291456000
hdfs balancer -include corehadoop04,corehadoop19,corehadoop20,corehadoop21,corehadoop22,corehadoop23,corehadoop24,corehadoop25 -threshold 4
posted @ 2021-05-13 15:20  whiteY  阅读(230)  评论(0)    收藏  举报