文件实时同步设置步骤inotify-rsync

要实现目标分为两个步骤,
首先实现文件发送(rsync),再实现监控文件变化自动更新(inotify)
超简洁操作步骤,需要深入了解请百度或者一对一沟通

一,文件发送rsync部分
1,服务端(接受文件的服务器A)设置
centos7.4最小化安装已自带rsync组件,使用rpm -qa rsync检查
a,配置文件修改
vim /etc/rsyncd.conf

uid = blueset
gid = blueset
use chroot = no
max connections = 2000
timeout = 600
pid file = /var/run/rsyncd.pid
lock file = /var/run/rsync.lock
log file = /var/log/rsyncd.log
ignore errors
read only = false
list = false
hosts allow = 11.1.4.0/24
hosts deny = 0.0.0.0/32
auth users = rsync_backup
secrets file = /etc/rsync.password
#############################
[datasync]
path = /opt/blueix/data

b,启动进程并检查,加入开机启动
rsync --daemon
ps -ef|grep rsync 
lsof -i :873
echo '/bin/rsync --daemon &' >> /etc/rc.local
c,创建密码文件
创建用户名密码文件根据rsync.conf
echo "rsync_backup:kevinstar">/etc/rsync.password
cat /etc/rsync.password 
chmod 600 /etc/rsync.password 
ls -l /etc/rsync.password

2,客户端(发送文件的服务器B)设置
a,创建密码文件
sudo echo "kevinstar">/etc/rsync.password
sudo chmod 600 /etc/rsync.password
sudo ls -l /etc/rsync.password
sudo cat /etc/rsync.password

b,测试是否正常发送文件到服务端
rsync -az /opt/blueix/data/ --delete rsync_backup@11.1.4.12::datasync --password-file=/etc/rsync.password

二,文件监控部分,服务器B
1,安装inotify软件
直接下载epel源yum安装,其他方式自行研究
wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repo
wget -O /etc/yum.repos.d/epel.repo http://mirrors.aliyun.com/repo/epel-7.repo
yum install inotify-tools –y

2,配置监控脚本,后台运行并测试
vim inotify.sh

#!/bin/bash
/usr/bin/inotifywait -mrq --format '%w%f' -e create,close_write,delete /opt/blueix/data|while read file
do
rsync -az --exclude fastdfs/ /opt/blueix/data/ --delete rsync_backup@11.1.4.12::datasync --password-file=/etc/rsync.password 
done

chmod +x inotify.sh
./inotify.sh &

由于监控文件夹包含fastdfs数据文件,文件数量太多,需要修改默认队列长度
echo 'fs.inotify.max_user_watches=99999999' >> /etc/sysctl.conf
sysctl -p

3,加入开机启动项
echo '/root/inotify.sh &' >> /etc/rc.local

 

inotlfy 缺点： 
并发如果大于 200 个文件（ 10 一 100K ），同步就会有延迟。
业务量大可采用drbd 文件系统级别同步方案,缺点副本未启用不可读写问题。