青岛实训 7月18号 day09

一、RSYNC概述

1.什么是rsync

rsync 是一个用于同步和传输文件和目录的命令行工具，广泛应用于 Linux 和其他类 Unix 操作系统。它的全称是 “remote sync”，可以高效地同步本地和远程文件。

2.rsync的好姐妹

sync 同步：刷新⽂件系统缓存，强制将修改过的数据块写⼊磁盘，并且更新超级块。

async 异步：将数据先放到缓冲区，再周期性（⼀般是30s）的去同步到磁盘。

rsync 远程同步：==remote synchronous==

数据同步过程

sync数据同步 => 保存⽂件（⽬标）=> 强制把缓存中的数据写⼊磁盘（⽴即保存），实时性 要求⽐较⾼的场景

asyn数据异步 => 保存⽂件（⽬标）=> 将数据先放到缓冲区，再周期性（⼀般是30s）的去同 步到磁盘，适合⼤批量数据同步的场景

3.rsync的特点

可以镜像保存整个⽬录树和⽂件系统

可以保留原有的权限(permission,mode)，owner,group,时间(修改时间,modify time)，软硬 链接，⽂件acl，⽂件属性(attributes)信息等

传输==效率⾼==，使⽤同步算法，只⽐较变化的（增量备份）

file1.txt file2.txt file3.txt(A服务器)

rsync实现数据同步 => 只同步file3.txt => 增量备份 file1.txt file2.txt(B服务器)

⽀持匿名传输，⽅便⽹站镜像；也可以做验证，加强安全

特点

（1）增量传输：rsync 只传输发生变化的文件部分，而不是整个文件。这使得它在处理大文件时非常高效，因为只传输差异部分。

（2）压缩传输：可以在传输过程中压缩数据，从而减少传输的数据量，提高传输速度。

（3）保留文件属性：rsync 可以保留文件的权限、所有权、时间戳等属性，使得同步后的文件完全一致。

（4）支持多种协议：除了本地同步外，rsync 还支持通过 SSH 等协议进行远程同步。

（5）过滤和排除文件：可以使用包含和排除规则，选择性地同步文件和目录。

（6）断点续传：在传输中断的情况下，可以继续上次的传输，而不必重新传输整个文件。

优势

（1）高效性：由于增量传输和压缩传输，rsync 比传统的文件传输工具（如 scp、ftp 等）更高效。

（2）灵活性：可以使用多种配置选项和参数，满足不同的同步需求，如单向同步、双向同步、镜像同步等。

（3）可靠性：支持文件校验和错误检测，确保传输文件的完整性和准确性。

（4）安全性：通过 SSH 进行加密传输，确保数据在传输过程中的安全。

（5）易用性：虽然是命令行工具，但其语法简单，功能强大，适合脚本化和自动化任务。

（6）跨平台：除了类 Unix 系统，rsync 也可以在 Windows 平台上使用（通过 Cygwin 或其他工具）。

4.rsync与scp的区别

两者都可以实现远程同步，但是相对⽐⽽⾔，rsync能⼒更强

① ⽀持增量备份

② 数据同步时保持⽂件的原有属性

yum -y install rsync

二、RSYNC的使用

1.基本语法

rsync同步操作

• 命令用法

– rsync [选项...]  源目录    目标目录

• 同步与复制的差异

– 复制:完全拷贝源到目标

– 同步:增量拷贝,只传输变化过的数据

• rsync操作选项

– -n：测试同步过程,不做实际修改

– --delete：删除目标文件夹内多余的文档

– -a：归档模式,相当于-rlptgoD

– -v：显示详细操作信息

– -z：传输过程中启用压缩/解压  

• 本地同步

– rsync [选项...] 本地目录1   本地目录2    //同步整个文件夹

– rsync [选项...] 本地目录1/  本地目录2    //只同步目录下的数据

 -v   详细模式输出 
 -a   归档模式，递归的⽅式传输⽂件，并保持⽂件的属性，equals -rlptgoD
 -r   递归拷⻉⽬录
 -l   保留软链接
 -p   保留原有权限
 -t   保留原有时间（修改）
 -g   保留属组权限
 -o   保留属主权限
 -D   等于--devices  --specials    表示⽀持b,c,s,p类型的⽂件
 -R   保留相对路径
 -H   保留硬链接
 -A   保留ACL策略
 -e   指定要执⾏的远程shell命令，ssh更改端⼝常⽤选项
 -E   保留可执⾏权限
 -X   保留扩展属性信息  a属性

2.本地文件同步

本地文件同步简单理解就是把⽂件从⼀个位置（同步=>拷贝）到另外⼀个位置（类似cp）

[root@1 ~]# rsync -av folder/* /opt   //将folder目录下的文件同步到opt目录下
 sending incremental file list
 f1/
 f1/file0
 f1/file1
 f1/file2
 f1/file3
 f1/file4
 f2/
 f3/
 sent 378 bytes  received 123 bytes  1,002.00 bytes/sec
 total size is 0  speedup is 0.00
 [root@1 ~]# tree /opt    //查看是否同步成功
 /opt
 ├── f1
 │   ├── file0
 │   ├── file1
 │   ├── file2
 │   ├── file3
 │   └── file4
 ├── f2
 └── f3
 3 directories, 5 files
 [root@1 ~]# rm -rf /opt/*
 [root@1 ~]# rsync -av folder /opt    //将folder目录同步过去
 sending incremental file list
 folder/
 folder/f1/
 folder/f1/file0
 folder/f1/file1
 folder/f1/file2
 folder/f1/file3
 folder/f1/file4
 folder/f2/
 folder/f3/
 sent 412 bytes  received 131 bytes  1,086.00 bytes/sec
 total size is 0  speedup is 0.00
 [root@1 ~]# tree /opt     //查看同步效果
 /opt
 └── folder
     ├── f1
     │   ├── file0
     │   ├── file1
     │   ├── file2
     │   ├── file3
     │   └── file4
     ├── f2
     └── f3
 4 directories, 5 files
 [root@1 ~]# rm -rf /opt/*
 [root@1 ~]# rsync -avR folder/ /opt    //将folder目录同步过去   -R表示保留相对路径
 [root@1 ~]# tree /opt     //查看同步效果
 /opt
 └── folder
     ├── f1
     │   ├── file0
     │   ├── file1
     │   ├── file2
     │   ├── file3
     │   └── file4
     ├── f2
     └── f3
 4 directories, 5 files
 [root@1 ~]# touch folder/f1/file5
 [root@1 ~]# rsync -av folder/f1/ folder/f2/
 [root@1 ~]# tree folder/

3.本地文件删除

[root@1 ~]# rm -rf folder/f1/file0
[root@1 ~]# rsync -av --delete folder/f1/ folder/f2/
[root@1 ~]# tree folder/

4.本地文件修改

 [root@1 ~]# vim folder/f1/file1
 123
 [root@1 ~]# rsync -av folder/f1/ folder/f2/
 [root@1 ~]# cat folder/f2/file1
 123

5.修改本地文件的时间和权限

[root@1 ~]# touch folder/f1/file1 -m -d "2024-7-18 00:00"
 [root@1 ~]# rsync -av folder/f1/ folder/f2/
 [root@1 ~]# ls -l folder/f2/file1
 [root@1 ~]# chmod g+w folder/f1/file1
 [root@1 ~]# rsync -av folder/f1/ folder/f2/
 [root@1 ~]# ls -l folder/f2/file1

5.进行远程同步

（1）找出服务的配置文件

（2）创建对应文件

（3）修改配置文件

 [root@1 ~]# vim /etc/rsync.conf
 [app]
 path=/app/studentweb/     //项目路径
 log file=/var/log/rsync.log   //项目日志文件路径

（4）重启服务

systemctl restart rsyncd

（5）进行测试

 [root@2 ~]# rsync -a root@192.168.1.101::  
 app   
 [root@2 ~]# rsync -av root@192.168.1.101::app /tmp/    //将app项目同步到2主机的tmp目录下
 [root@2 ~]# ls -l /tmp/
 drwxr-xr-x. 3 root root        18 7月  18 11:28 src
 [root@2 ~]# tree /tmp/src/

三、做一个监控inotify-tools

1.安装监听工具

 [root@1 ~]# yum -y install inotify-tools

下载后有两条指令

/usr/bin/inotifywait

/usr/bin/inotifywatch

2.监控/app/

inotifywait -mr /app/

3.编写inotify.sh脚本

 [root@1 ~]# which inotifywait 
 /usr/bin/inotifywait
 [root@1 ~]# vim inotify.sh
 #!/bin/bash   //指定编译工具
 /usr/bin/inotifywait -mrq -e  modify,delete,create,attrib,move /app/studentweb | while read events
 do
      rsync -av --delete  /app/studentweb/ root@10.0.0.20:/tmp/
 done
 [root@1 ~]# chmod +x inotify.sh 
 [root@1 ~]# ./inotify.sh 

4.让脚本一直运行

 [root@1 ~]# nohup ./inotify.sh  &   //放入后台一直运行