Hadoop连接服务器拷贝文件,hadoop完全分布式- - - - - -scp 、rsync 和 xsync 命令工具讲解...

(1)需求：循环复制文件到所有节点的相同目录下

(2)需求分析：

(a)rsync命令原始拷贝：

rsync  -rvl     /opt/software    root@hadoop103:/opt/

(b)期望脚本：

xsync要同步的文件名称

(c)说明：在/home/hadoop/bin这个目录下存放的脚本，hadoop用户可以在系统任何地方直接执行。

(3)脚本实现

(a)在/home/hadoop目录下创建bin目录，并在bin目录下xsync创建文件，文件内容如下：

mkdir bin

cd bin/

vim xsync

#!/bin/bash

#1 获取输入参数个数，如果没有参数，直接退出

pcount=$#

if((pcount==0)); then

echo no args;

exit;

fi

#2 获取文件名称

p1=$1

fname=`basename $p1`

echo fname=$fname

#3 获取上级目录到绝对路径

pdir=`cd -P $(dirname $p1); pwd`

echo pdir=$pdir

#4 获取当前用户名称

user=`whoami`

#5 循环

for((host=103; host<105; host++)); do

echo ------------------- hadoop$host --------------

rsync -rvl $pdir/$fname $user@hadoop$host:$pdir

done

(b)修改脚本 xsync 具有执行权限 ===>           chmod 777 xsync

(c)调用脚本形式：xsync 文件名称====>         xsync /home/atguigu/bin