Linux rsync文件同步工具

scp的不足

1. 性能问题

单线程传输

• SCP只使用单线程进行传输，这意味着在传输大文件或大量小文件时，其传输速度和效率可能不如其他多线程工具。

无法压缩数据传输

• SCP不支持内置的压缩机制，这在传输大文件时会导致带宽使用效率较低。

2. 功能有限

缺乏断点续传

• 如果传输过程中断，SCP没有内置的断点续传功能，需要重新开始传输。

无法同步目录

• SCP只适用于单次传输，无法像rsync那样进行目录同步。

3. 用户体验问题

交互式密码输入

• SCP通常需要交互式输入密码，这在自动化脚本中不方便。尽管可以使用SSH密钥认证来解决这个问题，但对于不熟悉密钥管理的用户来说，这增加了复杂性。

缺乏详细的传输信息

• SCP在传输过程中提供的信息较少，无法实时监控传输进度或速度，用户体验不佳。

4. 兼容性问题

不同平台的实现差异

• 虽然SCP广泛支持Unix和Linux系统，但在某些平台上（如Windows）可能需要额外的软件（如PuTTY的pscp）来实现SCP功能。

5. 安全性问题

暴露的元数据

• SCP传输时会暴露文件的元数据（如文件名、路径等），在某些高安全性需求的场景下，这可能是一个问题。

rsync简介

rsync 是一个用于在计算机之间高效地同步文件和目录的开源实用程序。它支持增量传输，只传输修改过的数据，从而节省带宽和时间。

rsync 的主要特点

增量传输

• 增量传输：rsync 只传输自上次同步以来更改的部分数据，大大减少了传输的数据量和时间。

压缩支持

• 压缩传输：支持在传输过程中压缩数据，进一步减少传输时间和带宽使用。

远程同步

• 远程同步：可以通过 SSH 等加密通道在远程计算机之间同步文件，确保数据安全。

保留文件属性

• 保留属性：在同步过程中，可以保留文件的权限、时间戳、符号链接等属性。

灵活的排除和包含

• 排除/包含规则：可以使用模式来指定要排除或包含的文件和目录。

使用rsync

基本用法：

rsync [选项] 来源 目标

常用选项：
-r：递归处理目录。
-a：归档模式，表示递归传输并保留文件权限、时间戳、符号链接等信息。
-v：详细模式，显示传输过程中的详细信息。
-z：在传输过程中对文件进行压缩。
-P：显示传输进度，并保留部分传输文件以便恢复。
-e：指定远程shell程序（如ssh）。

--delete：删除目标目录中不存在于源目录中的文件。
--exclude：排除指定的文件或目录，不进行同步。
--include：仅同步指定的文件或目录，忽略其他文件。
--bwlimit：限制带宽使用，控制传输速度。

本地同步备份：

[root@localhost ~]# rsync -av source/ Destination/
sending incremental file list
./   
file1
file2

sent 176 bytes  received 57 bytes  466.00 bytes/sec
total size is 0  speedup is 0.00
[root@localhost ~]# ll Destination/
total 0
-rw-r--r--. 1 root root 0 Jul 12 20:27 file1
-rw-r--r--. 1 root root 0 Jul 12 20:27 file2

远程同步备份：

将本地文件同步备份到远端服务器；

[root@localhost ~]# rsync source/* root@1.94.13.218:/root/Destination/

将远端服务器文件同步到 本地服务器上；