rsync数据同步--（linux运维03）

1. rsync的安装(备份服务器上)

Rsync是一款开源的、快速的、多功能的、可实现全量及增量的本地或远程数据同步备份的优秀工具

1.1 安装

yum源的优化：centos7系统优化3.更改源

yum -y install rsync

启动

systemctl start rsyncd

1.2配置文件

vim /etc/rsyncd.conf

uid = rsync      
gid = rsync     
port = 873    
fake super = yes
use chroot = no
max connections = 200
timeout = 300
pid file = /var/run/rsyncd.pid
lock file = /var/run/rsync.lock
log file = /var/log/rsyncd.log
ignore errors
read only = false
list = false
hosts allow = 172.16.1.0/24
hosts deny = 0.0.0.0/32
auth users = rsync_backup
secrets file = /etc/rsync.password
[backup]
comment = "backup dir by yq"  
path =/backup

解释说明：

uid = rsync       --- 指定管理备份目录的用户  
gid = rsync       --- 指定管理备份目录的用户组
port = 873        --- 定义rsync备份服务的网络端口号
fake super = yes  --- 将rsync虚拟用户伪装成为一个超级管理员用户 
use chroot = no   --- 和安全相关的配置
max connections = 200  --- 最大连接数  同时只能有200个客户端连接到备份服务器
timeout = 300          --- 超时时间(单位秒)
pid file = /var/run/rsyncd.pid   --- 记录进程号码信息 1.让程序快速停止进程 2. 判断一个服务是否正在运行
lock file = /var/run/rsync.lock  --- 锁文件
log file = /var/log/rsyncd.log   --- rsync服务的日志文件 用于排错分析问题
ignore errors                    --- 忽略传输中的简单错误
read only = false                --- 指定备份目录是可读可写
list = false                     --- 使客户端可以查看服务端的模块信息
hosts allow = 172.16.1.0/24      --- 允许传输备份数据的主机(白名单)
hosts deny = 0.0.0.0/32          --- 禁止传输备份数据的主机(黑名单)
auth users = rsync_backup        --- 指定认证用户 
secrets file = /etc/rsync.password   --- 指定认证用户密码文件 用户名称:密码信息
[backup]                         --- 模块信息
comment = "backup dir by oldboy"  
path = /backup                   --- 模块中配置参数 指定备份目录

特别说明：

1. fake super = yes
   如果不更改，或者注释，那么在进行文件备份的时候就会报错，这个将虚拟用户rsync伪装成root,可以将文件属主属组信息进行修改
2. list = false
   将此处改为true,使用其他的服务器就可以查看所有的备份目录，不安全

rsync rsync_backuo@172.16.1.41::

1.3创建虚拟用户rsync

useradd  rsync -M  -s /sbin/nologin

1.4创建备份服务认证密码

echo "rsync_backup:123456" > /etc/rsync.password

只对本机的超级用户可见：

chmod 600 /etc/rsync.password

1.5创建备份目录，并修改属主属组

mkdir /backup
chown rsync.rsync /backup

1.6启动备份服务

systemctl start rsyncd
systemctl enable rsyncd

2. 客户端的配置

安装

同样要安装rsync
yum -y install rsync

2.1创建一个秘密文件

echo "123456" > /etc/rsync.password
chmod 600 /etc/rsync.password

2.2进行免密交互测试

rsync -avz /etc/hosts rsync_backup@172.16.1.41::backup --password-file=/etc/rsync.password

3.rsync命令详解

3.1这里只是一部分

-v, --verbose     显示详细的传输信息
-a, --archive     命令的归档参数 包含: rtopgDl
-r, --recursive   递归参数
-t, --times       保持文件属性信息时间信息不变(修改时间)
-o, --owner       保持文件属主信息不变
-g, --group       保持文件属组信息不变
PS: 如何让-o和-g参数生效,需要将配置文件uid和gid改为root,需要将 fake super参数进行注释
-p, --perms       保持文件权限信息不变
-D,               保持设备文件信息不变
-l, --links       保持链接文件属性不变
-L,               保持链接文件数据信息不变
-P,               显示数据传输的进度信息
--exclude=PATTERN   排除指定数据不被传输
--exclude-from=file 排除指定数据不被传输(批量排除)
--bwlimit=RATE    显示传输的速率  100Mb/8=12.5MB
                  企业案例:    马路(带宽-半)   人人网地方 
--delete          无差异同步参数(慎用)
                  我有的你也有,我没有的你也不能有

3.2多目录配置

vim /etc/rsyncd.conf
添加

[dba]
comment = "backup dir by oldboy"
path = /dba
[dev]
comment = "backup dir by oldboy"
path = /devdata

可以自己更改，然后重启rsync

systemctl restart rsyncd

4.rsync的命令实践

4.1实验环境环境的准备

mkdir -p /oldboy/{a..c}
touch -p /oldboy/{a..c}/{1..3}.txt

4.1.2将/oldboy目录下面 a目录数据全部备份 b目录不要备份1.txt文件 c整个目录不要做备份

sync -avz /oldboy --exclude=/oldboy/b/1.txt --exclude=/oldboy/c/ rsync_backup@172.16.1.41::backup --password-file=/etc/rsync.password

相对路径方式:相对于/oldboy

 rsync -avz /oldboy --exclude=b/1.txt --exclude=c/ rsync_backup@172.16.1.41::backup --password-file=/etc/rsync.password 

4.1.3 将/oldboy目录下面 a目录数据全部备份 b目录不要备份1.txt文件 c整个目录1.txt 3.txt文件不要备份

编写一个exclude.txt 文件

b/1.txt
c/1.txt
c/3.txt
exclude.txt

rsync -avz /oldboy --exclude-from=/oldboy/exclude.txt rsync_backup@172.16.1.41::backup --password-file=/etc/rsync.password 

4.2 守护进程来创建备份目录

rsync -avz /etc/hosts  rsync_backup@172.16.1.41::backup/10.0.0.31/ --password-file=/etc/rsync.password

不能创建多级目录，只能在原有的基础上创建一个目录