Linux系统中的文件传输优化

【实验环境】
准备2台主机并且保证这俩台主机是可以通信的
rhel7_node1 :192.168.43.20
rhel8_node1 :192.168.43.11
1.scp命令
scp 本地文件 远程主机用户@远程主机ip:远程主机目录
scp 远程主机用户@远程主机ip:远程主机目录 本地文件

测试scp命令
a)把本地文件复制到远程主机

b)把远程文件复制到本地

2.rsync命令
a)rsync和scp命令的对比
首先在rhel7_node1中建立文件
dd if=/dev/zero of=/mnt/file1 bs=1M count=10
dd if=/dev/zero of=/mnt/file2 bs=1M count=20
dd if=/dev/zero of=/mnt/file3 bs=1M count=30

其次创建测试脚本文件

【注】：为了避免登陆繁琐，可以将俩台主机之间建立免密登陆使远程文件传输可以直接执行
在rhel7_node1中：
ssh-keygen
ssh-copy-id -i /root/.ssh/id_rsa.pub.root@192.168.43.11

执行文件check_scp.sh查看系统执行时间

【以上执行效果我们可以看出scp三次执行时间几乎一致】
执行文件check_rsync.sh查看系统执行时间

【以上执行效果我们可以看出rsync三次执行时间相差很大，后俩次远远小于第一次】

【总结】：scp传输是加密的,可能会稍微影响一下速度，scp不占资源，不会提高多少系统负荷，虽然 rsync比scp会快一点，但当小文件众多的情况下，rsync会导致硬盘I/O非常高，而scp基本不影响系统正常使用。
b）rsync用法
rsync 文件 远程用户@远程主机ip:远程主机目录
rsync 远程用户@远程主机ip:远程主机目录 文件路径
rsync
-r 复制目录
-l 复制链接
-p 复制权限
-t 复制时间
-o 复制拥有者
-g 复制拥有组
-D 复制设备文件
依次测试上式命令:
首先在rhel8中：watch -n 1 ls -lR /mnt
在rhel7中：touch /mnt/file{1..5} ;chmod 777 /mnt/*;useradd westos;chown westos.westos /mnt/*;ln -s /mnt/file1 /mnt/file;
执行命令查看效果：



等等.
3.文件的归档压缩
1）文件的归档

tar
c	创建
f	指定文件名称
x	接档
t	查看
r	向归档文件中添加文件
- -get	接档指定文件
- -delete	删除指定文件
-C	指定解档路径

2）文件的压缩
zip
zip -r etc.tar.zip etc.tar ##zip格式压缩
upzip etc.tar.zip #zip格式解压缩
gzip
gzip etc.tar #gzip格式压缩
gunzip etc.tar.gz #gzip格式解压缩
bzip2 etc.tar #bzip2格式压缩
bunzip2 etc.tar.bz2 #bzip2格式解压缩

xz etc.tar #xz格式压缩
unxz etc.tar.xz #xz格式解压缩

3.tar+压缩
gzip
tar zcf etc.tar.gz /etc
tar zcf etc.tar.gz

bzip2
tar jcf etc.tar.bz2 /etc
tar jxf etc.tar.bz2

xz
tar Jcf etc.tar.xz /etc
tar Jxf etc.tar.xz