Linux查看增量文件,Linux 利用 rsync 命令提取增量文件

参考：

rsync 命令：http://man.linuxde.net/rsync

Linux文件夹对比并提取的差分文件技巧-rsync的妙用：https://my.oschina.net/mengshuai/blog/551379

例子：

1. 文件包准备工作

假设我们有一个项目包为 "Test"，我们对其copy一份重命名为 "Test.old"，再将更新后的项目完整包copy一份命名为 "Test.new"：

[wangyuanyuan@hz01-pcsdev02.hz01.baidu.com tar_test]$ ls

Test Test.new Test.old

[wangyuanyuan@hz01-pcsdev02.hz01.baidu.com tar_test]$

Test.new 项目包内容为：

[wangyuanyuan@hz01-pcsdev02.hz01.baidu.com tar_test]$ tree Test.new/

Test.new/

|-- dir_test

| |-- dir_file_new.txt

| `-- dir_file.txt

|-- empty

|-- empty_new

|-- file-2.txt

|-- file-3.txt

|-- modify_file.txt

`-- new_dir

`-- test.txt

4 directories, 6 files

[wangyuanyuan@hz01-pcsdev02.hz01.baidu.com tar_test]$

Test.old 项目包内容为：

[wangyuanyuan@hz01-pcsdev02.hz01.baidu.com tar_test]$ tree Test.old/

Test.old/

|-- dir_test

|   |-- dir_file_old.txt

|   `-- dir_file.txt

|-- empty

|-- empty_old

|-- file-1.txt

|-- file-2.txt

`-- modify_file.txt

3 directories, 5 files

[wangyuanyuan@hz01-pcsdev02.hz01.baidu.com tar_test]$

Test.old包 与 Test.new 包对比结果为：

[wangyuanyuan@hz01-pcsdev02.hz01.baidu.com tar_test]$ diff -rs Test.new/ Test.old/

Only in Test.new/dir_test: dir_file_new.txt

Only in Test.old/dir_test: dir_file_old.txt

Files Test.new/dir_test/dir_file.txt and Test.old/dir_test/dir_file.txt are identical

Only in Test.new/: empty_new

Only in Test.old/: empty_old

Only in Test.old/: file-1.txt

Files Test.new/file-2.txt and Test.old/file-2.txt are identical

Only in Test.new/: file-3.txt

diff -rs Test.new/modify_file.txt Test.old/modify_file.txt

1c1

< modify content test: after

---

> modify content test: befor

Only in Test.new/: new_dir

[wangyuanyuan@hz01-pcsdev02.hz01.baidu.com tar_test]$

2.获取差异文件列表

以 Test.new 包为基准，利用 rsync 命令获取增量文件列表：

[wangyuanyuan@hz01-pcsdev02.hz01.baidu.com tar_test]$ rsync -rcnC --out-format="%n" Test.new/ Test.old/

file-3.txt

modify_file.txt

dir_test/dir_file_new.txt

empty_new/

new_dir/

new_dir/test.txt

[wangyuanyuan@hz01-pcsdev02.hz01.baidu.com tar_test]$

可以看到，这里默认会显示出文件夹，所以要过滤掉以『/』结尾的文件夹的显示：

[wangyuanyuan@hz01-pcsdev02.hz01.baidu.com tar_test]$ rsync -rcnC --out-format="%n" Test.new/ Test.old/ |grep -v "/$"

file-3.txt

modify_file.txt

dir_test/dir_file_new.txt

new_dir/test.txt

[wangyuanyuan@hz01-pcsdev02.hz01.baidu.com tar_test]$

有了增量文件列表，复制的操作方法就很多了。

3.复制差异文件到新目录

可以继续使用 rsync 同步到新的 out 目录，以防止多次执行后错误文件修复问题：

[wangyuanyuan@hz01-pcsdev02.hz01.baidu.com tar_test]$ rsync -rcnC --out-format="%n" Test.new/ Test.old/ |grep -v "/$" |xargs -I{} rsync -R Test/{} out/

[wangyuanyuan@hz01-pcsdev02.hz01.baidu.com tar_test]$ tree out/

out/

`-- Test

|-- dir_test

|   `-- dir_file_new.txt

|-- file-3.txt

|-- modify_file.txt

`-- new_dir

`-- test.txt

3 directories, 4 files

[wangyuanyuan@hz01-pcsdev02.hz01.baidu.com tar_test]$最后，out 文件夹下的 Test 包即可作为本次项目修改的增量包。