rsync下行同步+inotify实时同步部署
一、rsync下行同步
1、rsync简介
一款快速增量备份工具
- Remote Sync,远程同步
- 支持本地复制,或者与其他SSH、rsync主机同步
2、rsync同步源
A服务器同步B服务器的数据,B服务器就是备份源
反过来,B服务器同步A服务器的数据,那么A服务器就是备份源
- rsync同步源
- 指备份操作的远程服务器,也称为备份源
3、配置rsync源
-
建立rsyncd.conf配置文件、独立的账号文件
启用rsync的 --daemon模式 -
配置文件rsyncd.conf
认证配置auth users、secrets file,不加则为匿名 -
独立的账号文件
用户名:密码
每行一个用户记录
独立的账号数据,不依赖系统账号 -
启用rsync服务
通过 --daemon独自提供服务,rsync --daemon
执行kill $(cat /var/run/rsyncd.pid)关闭服务
4、rsync命令
rsync 【选项】原始位置 目标位置
选项 | 说明 |
---|---|
-a | 归档模式,递归并保留对象属性,等同于-rlptgoD |
-v | 显示同步过程的详细信息 |
-z | 在传输时进行压缩 |
-H | 保留硬链接文件 |
-A | 保留ACL属性信息 |
- -delete | 删除目标位置有而原始位置没有的文件 |
- -checksum | 根据对象的校验和来决定是否跳过文件 |
- -delete的作用简单来说,就是删除差异文件,保留一致性
5、配置源的两种表达方式
用户名@主机地址::共享模块名
rsync://用户名@主机地址/共享模块名
二、inotify简介
可以监控文件系统的变动情况,并做出通知响应
-
调整inotify内核参数(优化)
-
/etc/sysctl.conf(内核参数配置文件)
-
inotifywait:用于持续监控,实时输出结果
-
inotifywatch:用于短期监控,任务完成后再输出结果
max_queue_events #监控事件队列大小
max_user_instances #最多监控实例数
max_user_watches #每个实例最多监控文件数
inotifywait -mrq -e modify,create,move,delete /var/www/html
-m | 持续进行监控 |
-r | 递归监控所有子对象 |
-q | 简化输出信息 |
-e | 指定要监控哪些事件类型 |
modify | 修改 |
create | 创建 |
move | 移动 |
delete | 删除 |
三、配置rsync下行同步
1、实验环境的准备
Master CentOS7 192.168.22.111 rsync
Slave CentOS7 192.168.22.123 rsync inotify-tools-3.14.tar.gz
安装包的连接:
link.
提取码:qwer
下行同步:将master服务器数据备份到slave服务器
2、配置 Master
192.168.22.111
systemctl stop firewalld.service
setenforce 0
yum -y install httpd rsync
vim /etc/rsyncd.conf
uid = nobody
gid = nobody
use chroot = yes
address = 192.168.22.111
port 873
log file = /var/log/rsyncd.log
pid file = /var/run/rsyncd.pid
hosts allow = 192.168.22.0/24
[wwwroot]
path = /var/www/html
comment = Document Root of www.jin.com
read only = yes
dont comperss = *.gz *.bz2 *.tgz *.zip *.rar *.z
auth users = jinlei
secrets file = /etc/rsyncd_users.db
安装 httpd 为例自动生成目录,将/var/www/html 作为共享目录
vim /etc/rsyncd_users.db
jinlei:123456
chmod 600 /etc/rsyncd_users.db
rsync --daemon
netstat -natp | grep rsync
cd /var/www/html
touch 1.html 2.html
ls
3、配置slave
192.168.22.123
systemctl stop firewalld.service
setenforce 0
yum -y install rsync
cd /opt
mkdir qqq
chmod 777 qqq
vim /etc/server.pass
123456
chmod 600 /etc/server.pass
rsync -az --delete --password-file=/etc/server.pass jinlei@192.168.22.111::wwwroot /opt/qqq
ls qqq
四、rsync+inotify实时同步
1、配置Master
192.168.22.111
vim /etc/rsyncd.conf
read only = no
kill `cat /var/run/rsyncd.pid`
netstat -natp | grep rsync
rsync --daemon
netstat -natp | grep rsync
chmod 777 /var/www/html
2、配置slave
192.168.22.123
cat /proc/sys/fs/inotify/max_queued_events
cat /proc/sys/fs/inotify/max_user_instances
cat /proc/sys/fs/inotify/max_user_watches
vim /etc/sysctl.conf
fs.inotify.max_queued_events = 32768
fs.inotify.max_user_instances = 1024
fs.inotify.max_user_watches = 1048576
sysctl -p
yum -y install gcc gcc-c++
#放入安装包
tar zxvf inotify-tools-3.14.tar.gz -C /opt
cd /opt/inotify-tools-3.14/
./configure
make && make install
- 编写自动监控同步脚本
vim /opt/inotify.sh
#!/bin/bash
INOTIFY_CMD="inotifywait -mrq -e create,delete,move,modify,attrib /opt/qqq/"
RSYNC_CMD="rsync -azH --delete --password-file=/etc/server.pass /opt/qqq/ jinlei@192.168.22.111::wwwroot"
$INOTIFY_CMD | while read DIRECTORY EVENT FILE
do
if [ $(pgrep rsync | wc -l) -le 0 ] ; then
$RSYNC_CMD
fi
done
cd /opt/
chmod +x inotify.sh
./inotify.sh
cd /opt/qqq
touch 3.html
rm -rf 2.html
- 在slave上
- 在master上查看