rsync

rsync集群分发脚本

需求：循环复制文件到所有节点的相同目录下

脚本代码如下：

#!/bin/bash 
 
#1. 判断参数个数 
# 判断参数是否小于1
if [ $# -lt 1 ]   
then 
    echo Not Enough Arguement! 
    exit; 
fi 
​
#2. 遍历集群所有机器 
# 对所有都进行分发
for host in master slave1 slave2 
do 
   echo ====================  $host  ==================== 
   #3. 遍历所有目录，挨个发送 
   for file in $@ 
   do 
​
        #4. 判断文件是否存在 
        if [ -e $file ] 
            then 
                #5. 获取父目录 
                pdir=$(cd -P $(dirname $file); pwd) 
                
                #6. 获取当前文件的名称 
                fname=$(basename $file) 
                ssh $host "mkdir -p $pdir" 
                rsync -av $pdir/$fname $host:$pdir 
            # 如果不存在
            else 
                echo $file does not exists! 
        fi 
    done 
done
​

若在执行时报：没有权限

rsync: failed to set times on "/etc/profile.d/.": Operation not permitted (1)
./
my_env.sh
rsync: mkstemp "/etc/profile.d/.my_env.sh.BTdFcl" failed: Permission denied (13)
​

解决方法：给root用户一个命令来源

sudo /home/hadoop/bin/xsync /etc/profile.d/.my_env.sh

 

 

rsync使用命令（报错）

rsync -av hadoop-3.1.3/ hadoop@slave1:/opt/module/hadoop-3.1.3/

报错：

hadoop@slave1's password: 
bash: rsync: 未找到命令
rsync: connection unexpectedly closed (0 bytes received so far) [sender]
rsync error: remote command not found (code 127) at io.c(226) [sender=3.1.2]

原因：目标主机未安装rsync