rsync同步工具和xsync、xcall集群脚本

rsync 远程同步工具，主要用于备份和镜像。具有速度快、避免复制相同内容和支持符号链接的优点。

rsync 和 scp 区别：
scp 复制所有文件。
rsync 只对差异文件做更新。

查看rsync 使用说明

man rsync | more

基本语法

rsync -rvl $pdir/$fname $user@hadoop$host:$pdir

命令 命令参数 要拷贝的文件路径/名称 目的用户@主机:目的路径选项

-r 递归
-v 显示复制过程
-l 拷贝符号连接

案例实操

安装rsync,执行如下命令

yum install rsync -y 

把本机/opt/tmp 目录同步到 hadoop152 服务器的 root 用户下的/opt/tmp 目录

 rsync -rvl /opt/tmp  root@hadoop152:/opt/

编写集群分发脚本 xsync

1. 需求分析：循环复制文件到所有节点的相同目录下。
   原始拷贝：

rsync  -rvl  /opt/module   root@hadoop152:/opt/

2. 期望脚本：

xsync  要同步的文件名称

3. 在/usr/local/bin 这个目录下存放的脚本，可以在系统任何地方直接执行。

案例实操：

1. 在/usr/local/bin 目录下创建 xsync 文件，

[root@hadoop151 bin]# touch xsync

[root@hadoop151 bin]# vim xsync

文件内容如下：

#!/bin/bash

#1 获取输入参数个数，如果没有参数，直接退出
pcount=$#

if((pcount==0));then 
	echo no args;
    exit;
fi

#2 获取文件名称
p1=$1 fname=`basename $p1`
echo fname=$fname

#3 获取上级目录到绝对路径
pdir=`cd -P $(dirname $p1); pwd`
echo pdir=$pdir

#4 获取当前用户名称
user=`whoami`

#5 循环
for((host=151; host<154; host++));
do
    echo --------------- hadoop$host ----------------
    rsync -rvl $pdir/$fname $user@hadoop$host:$pdir
done

2. 给脚本xsync添加可执行权限

[root@hadoop151 bin]# chmod 777 xsync

3. 调用脚本形式：xsync 文件名称

[root@hadoop151 opt]$ xsync /opt/tmp/

编写集群操作脚本 xcall

1. 需求分析：在所有主机上同时执行相同的命令xcall +命令

2. 具体实现

在/usr/local/bin 目录下创建 xcall 文件，

 [root@hadoop151 bin]# touch xcall

 [root@hadoop151 bin]# vim xcall

文件内容如下：

#!/bin/bash 

pcount=$# 

if((pcount==0));then
	echo no args; 
	exit;
fi

echo -------------localhost----------

$@

for((host=101; host<=108; host++)); 
do 
	echo ----------hadoop$host---------
	ssh hadoop$host $@
done

3. 给脚本xcall添加可执行权限

[root@hadoop151 bin]# chmod 777 xcall

4. 调用脚本形式： xcall 操作命令

[root@hadoop151 ~]# xcall rm -rf /opt/tmp/

参考资料

https://blog.csdn.net/qq_41204714/article/details/84309057