rsync简介
● 一款快速增量备份工具
● Remote Sync,远程同步 支持本地复制,或者与其他SSH、rsync主机同步
rsync同步源
● 指备份操作的远程服务器,也称为备份源
配置rsync源
●建立rsyncd.conf配置文件、独立的账号文件
●启用rsync的 --daemon模式
#配置文件rsyncd.conf
●认证配置auth users、secrets file,不加则为匿名
#独立的账号文件
●用户名:密码
●每行一个用户记录
●独立的账号数据,不依赖系统账号
#启用rsync服务
●通过 --daemon独自提供服务,rsync --daemon
●执行kill $(cat /var/run/rsyncd.pid)关闭服务
#配置源的两种表示方法
●格式一
用户名@主机地址::共享模块名.
rsync -avz backuper@192.168.64.10::wwwroot /root
●格式二
rsyne://用户名@主机地址/共享模块名
rsync -avz rsync://backuper@192.168.64.10::/wwwroot /root
rsync命令
rsync 【选项】原始位置 目标位置
常用选项 | 说明 |
---|---|
-r | 递归模式,包含目录及子目录中的所有文件 |
-l | 对于符号链接文件仍然复制为符号链接文件 |
-v | 显示同步过程的详细信息 |
-z | 在传输文件时进行压缩 |
-a | 归档模式,递归并保留对象属性,等同于-rlptgoD |
-p | 保留文件的权限标记 |
-t | 保留文件的时间标记 |
-g | 保留文件的属组标记(仅超级用户使用) |
-o | 保留文件的属主标记(仅超级用户使用) |
-H | 保留硬链接文件 |
-A | 保留ACL属性信息 |
-D | 保留设备文件及其他特殊文件 |
--delete | 删除目标位置有而原始位置没有的文件 |
--checksum | 根据对象的校验和来决定是否跳过文件 |
rysnc远程复制
配置环境
主机 | IP地址 |
---|---|
rsync | 192.168.64.10 |
client | 192.168.64.20 |
master (192.168.64.10)
下载rsync并启动:
[root@rsync ~]#rpm -q rsync
[root@rsync ~]#yum -y install rsync ##安装rsync
配置rsync服务器:
[root@rsync ~]# vim /etc/rsyncd.conf
uid = nobody #root
gid = nobody #root
use chroot = yes #禁锢在源目录
address = 192.168.64.10 #监听地址
port 873 #监听端口 tcp/udp 873
log file = /var/log/rsyncd.log #日志文件位置
pid file = /var/run/rsyncd.pid #存放进程ID的文件位置
hosts allow = 192.168.64.0/24 #允许访问的客户机地址
[wwwroot] ##第一个共享模块
path = /var/www/html #源目录的实际路径
comment = Document Root of www.wmc.com
read only = yes #是否为只读
dont comperss = *.gz *.bz2 *.tgz *.zip *.rar *.z #同步时不再压缩的文件类型
auth users = wmc #授权账户,多个账号以空格分隔
secrets file = /etc/rsyncd_users.db #存放账户信息的数据文件
为备份账户创建数据文件:
vim /etc/rsyncd_users.db
wmc:95620
chmod 600 /etc/rsyncd_users.db
#保证所有用户对源目录/var/www/html 都有读的权限
#必须赋予600的权限,否则会报错
rsync --daemon #开启服务
netstat -natp | grep rsync #检测端口号,确认服务是否成功开启
创建共享目录:
cd /var/www/html
touch aaa.html bbb.html
slave(192.168.64.20)
yum install -y rsync #安装rsync
mkdir tongbu #创建一个目录/tongbu,用来同步
rsync -avz wmc@192.168.64.10::wwwroot /tongbu #使用rsync同步备份源的同步文件
rsync+inotify实时同步
inotify简介
可以监控文件系统的变动情况,并做出通知响应
●调整inotify内核参数(优化)
●/etc/sysctl.conf(内核参数配置文件)
max_queue_events #监控事件队列大小
max_user_instances #最多监控实例数
max_user_watches #每个实例最多监控文件数
inotifywait:用于持续监控,实时输出结果
inotifywatch:用于短期监控,任务完成后再输出结果
inotifywait -mrq -e modify,create,move,delete /var/www/html
-m | 持续进行监控 |
---|---|
-r | 递归监控所有子对象 |
-q | 简化输出信息 |
-e | 指定要监控哪些事件类型 |
modify | 修改 |
create | 创建 |
move | 移动 |
delete | 删除 |
rsync+inotify实时同步
Master(192.168.64.10)
vim /etc/rsyncd.conf
read only = no
kill `cat /var/run/rsyncd.pid`
netstat -natp | grep rsync
rsync --daemon
netstat -natp | grep rsync
chmod 777 /var/www/html
Slave(192.168.64.20)
vim /etc/server.pass
995620
#编辑免交互密钥文件,第一行为密码
chmod 600 /etc/server.pass
#给密钥文件赋权600
rsync -az --delete --password-file=/etc/server.pass wmc@192.168.64.10::wwwroot /tongbu
#rsync,使用密钥文件/etc/server/pass对应backuper用户,IP地址为192.168.64.10的共享模块文件进行压缩,并归档同步至当前服务器的/tongbu目录下,同时删除差异内容,如果原目标有的,会增加,原目标没有的,会删除。保持一致性。
cat /proc/sys/fs/inotify/max_queued_events
cat /proc/sys/fs/inotify/max_user_instances
cat /proc/sys/fs/inotify/max_user_watches
vim /etc/sysctl.conf #修改inotify内核参数
fs.inotify.max_queued_events = 32768 ##监控时间队列,默认为16384
fs.inotify.max_user_instances = 1024 ##最多监控实例数,默认为128
fs.inotify.max_user_watches = 1048576 ##每个实例最多监控文件数,默认为8192
#当要监控的目录、文件数据量较多或者变化频繁时,建议加大参数值
[root@rsync ~]# sysctl -p
fs.inotify.max_queued_events = 32768
fs.inotify.max_user_instances = 1024
fs.inotify.max_user_watches = 1048576
编译安装 inotify-tools
yum -y install gcc gcc-c++
#放入安装包
tar zxvf inotify-tools-3.14.tar.gz -C /opt
cd /opt/inotify-tools-3.14/
./configure
make && make install
编写出发同步脚本
vim inotify.sh
#!/bin/bash
INOTIFY_CMD="inotifywait -mrq -e create,delete,move,modify,attrib /tongbu/"
RSYNC_CMD="rsync -apzH --delete --password-file=/etc/server.pass /tongbu/ wmc@192.168.64.10::wwwroot/"
$INOTIFY_CMD | while read DIRECTORY EVENT FILE
do
if [ $(pgrep rsync | wc -l) -le 0 ] ; then
$RSYNC_CMD
fi
done
脚本详解:
INOTIFY_CMD:持续监听并时时报告指定目录下的报告
RSYNC_CMD:把本地推送到对方192.168.64.10同步源的共享目录里面
inotify_cmd:监听目录tongbu的动态变化,但是无法同步,这时就需要rsync -apzH(H:符号连接)将tongbu目录下的数据同步,那么同步给谁,wmc@192.168.64.10::wwwroot/:表示同步给rsycn源服务器;
数据同步指的是:本地tongbu的内容同步给wwwroot的模块内/var/www/html内
sh inotify.sh
验证
sh inotify.sh
cd /tongbu
touch ccc.html
rm -rf aaa.html
192.168.64.10上同步了192.168.64.20上修改的信息