服务器间文件传输

1.scp（secure copy）安全拷贝

（1）基本语法

scp -r 源路径 目的地路径

scp   -r      $pdir/$fname       $user@$host:$pdir/$fname
命令  递归   要拷贝的文件路径/名称  目的地用户@主机:目的地路径/名称

scp   -r    $user@$host:$pdir/$fname  $user@$host:$pdir/$fname
命令  递归   源地用户@主机:源路径/名称  目的地用户@主机:目的地路径/名称

指定端口号用-P 端口号

（2）案例实操

以下s1、s2、s3做了 /etc/hosts 配置，也可以切换为主机 ip

• 在 s1 服务上，将 s1中 /opt/module/jdk1.8.0_212 目录拷贝到 s2 /opt/module 目录下。

  $ scp -r /opt/module/jdk1.8.0_212 zy@s2:/opt/module
  

• 在 s2 服务上，将 s1 中 /opt/module/jdk1.8.0_212 目录拷贝到 s2 上。

  $ scp -r zy@s1:/opt/module/jdk1.8.0_212 /opt/module/
  

• 在 s2 服务上，将 s1 中 /opt/module目录下所有目录拷贝到 s3 上。

  $ scp -r zy@s1:/opt/module/* zy@s3:/opt/module
  

2.rsync远程同步工具

rsync主要用于备份和镜像。具有速度快、避免复制相同内容和支持符号链接的优点。

rsync和scp区别：用rsync做文件的复制要比scp的速度快，rsync只对差异文件做更新。scp是把所有文件都复制过去。

（1）基本语法

rsync  -av       $pdir/$fname      $user@$host:$pdir/$fname
命令  选项参数  要拷贝的文件路径/名称  目的地用户@主机:目的地路径/名称

​ 选项参数说明

选项	功能
-a	归档拷贝
-v	显示复制过程

（2）案例实操

• 在 s1 的 /opt/module/hadoop-3.1.3 下新增文件

• 同步 s1 中的 /opt/module/hadoop-3.1.3 到 s2

  $ rsync -av jdk1.8.0_212/ zy@s2:/opt/module/jdk1.8.0_212/
  

3.脚本分发

期望脚本在任何路径都能使用（脚本放在声明了全局环境变量的路径），以下路径中都能全局使用

$ echo $PATH
/usr/local/bin:/usr/bin:/usr/local/sbin:/usr/sbin:/home/zy/.local/bin:/home/zy/bin

脚本实现

在 /home/zy/bin 目录下创建 xsync 文件

#!/bin/bash

#1. 判断参数个数
if [ $# -lt 1 ]
then
    echo Not Enough Arguement!
    exit;
fi

#2. 遍历集群所有机器
for host in s1 s2 s3
do
    echo ====================  $host  ====================
    #3. 遍历所有目录，挨个发送

    for file in $@
    do
        #4. 判断文件是否存在
        if [ -e $file ]
            then
                #5. 获取父目录, -P 是软链接进入实际目录
                pdir=$(cd -P $(dirname $file); pwd)

                #6. 获取当前文件的名称
                fname=$(basename $file)
                # -p 防止文件已存在报错，加上不报错
                ssh $host "mkdir -p $pdir"
                rsync -av $pdir/$fname $host:$pdir
            else
                echo $file does not exists!
        fi
    done
done

执行

$ chmod +x xsync
$ xsync /home/zy/bin # 脚本分发到所有服务器
$ sudo ./bin/xsync /etc/profile.d/my_env.sh # root权限文件分发用sudo，路径要写完

4.ssh无密登录

配置了次项过后，ssh在进行数据传输的时候就不用每次输入密码

各个服务器上执行，在~/.ssh 目录生成公钥和私钥

$ ssh-keygen -t rsa

将公钥拷贝到要免密登录的目标机器上

$ ssh-copy-id server1 # 拷贝当前服务器公钥到 server1 服务器上

.ssh 文件夹下文件

文件名	描述
known_hosts	记录ssh访问过计算机的公钥（public key）
id_rsa	生成的私钥
id_rsa.pub	生成的公钥
authorized_keys	存放授权过的无密登录服务器公钥