Linux系统下数据同步服务RSYNC

同步步骤：

Code代码服务器 => 10.1.1.10 /app/java_project

Backup备份服务器 => 10.1.1.100

Code：

① 准备代码

② 编写/etc/rsyncd.conf⽂件，定义同步代码⽬录

③ 启动rsyncd服务

Backup：

① 测试rsync是否可以连接到Code服务器上的rsyncd服务

② 创建备份⽬录

③ 编写计划任务，凌晨1点03去Code服务器同步代码

④ 编写rsync_java.sh⽂件，实现同步操作

rsycn 安装

Yum -y install rsync

Rsync 【选项】源⽂件 ⽬标⽬录

1.本地同步

rsync -av ~/abc/ /opt/

同步⽂件的内容，⽂件的属性 ⽂件的新增 修改 删除(--delete)

rsync -av /⽬录 /tmp。# 同步⽬录下的⽂件

rsync -av /⽬录/ /tmp/ #同步⽬录

rsyn c -avR 保存相对路径，其实也就是同步了⽬录

2.远程同步

要求两台主机要应该安装rsync服务

⽤法和本地同步相同

rsync -av root@192.168.71.135:/opt/ /tmp/ 拉取 pull

rsync -av /tmp/ root@192.168.71.135:/tmp. push 推送

需要输⼊密码，需要免密，这个需要的密码也是使⽤sssh服务验证，所以，直接ssh免密 设置好之后就直接⽀持rsync

3.同步服务器的设置

启动服务

systemctl start rsyncd

修改配置⽂件

vim /etc/rsyncd.conf

[abc]

path=/app/javaproject/

Log file=/var/log/rsync.log

重启rsync服务

systemctl restart rsyncd

在另⼀台主机上拉取rsync服务中的项⽬

测试是否能够检测到项⽬ 检测到配置的abc

Rsync -a root@192.168.71.135::

abc Rsync -av 源。⽬标⽬录

一、RSTNC概述

1、rsync的好姐妹

sync 同步：刷新⽂件系统缓存，强制将修改过的数据块写⼊磁盘，并且更新超级块。

async 异步：将数据先放到缓冲区，再周期性（⼀般是30s）的去同步到磁盘。

rsync 远程同步：==remote synchronous==

数据同步过程 sync数据同步 => 保存⽂件（⽬标）=> 强制把缓存中的数据写⼊磁盘（⽴即保存），实时性 要求⽐较⾼的场景

asyn数据异步 => 保存⽂件（⽬标）=> 将数据先放到缓冲区，再周期性（⼀般是30s）的去同 步到磁盘，适合⼤批量数据同步的场景

2、rsync特点

（1）可以镜像保存整个⽬录树和⽂件系统

（2）可以保留原有的权限(permission,mode)，owner,group,时间(修改时间,modify time)，软硬 链接，⽂件acl，⽂件属性(attributes)信息等

（3）传输==效率⾼==，使⽤同步算法，只⽐较变化的（增量备份； file1.txt file2.txt file3.txt(A服务器)； rsync实现数据同步 => 只同步file3.txt => 增量备份； file1.txt file2.txt(B服务器)

（4）⽀持匿名传输，⽅便⽹站镜像；也可以做验证，加强安全

3、rsync与scp的区别

两者都可以实现远程同步，但是相对⽐⽽⾔，rsync能⼒更强

① ⽀持增量备份

② 数据同步时保持⽂件的原有属性  

yum -y install rsync

二、RSYNC的使用

1、基本语法

 # man rsync
 NAME
       rsync — a fast, versatile, remote (and local) file-copying tool
       //⼀种快速、通⽤、远程（和本地）的⽂件复制⼯具
SYNOPSIS
     //本地⽂件同步
     Local:rsync [OPTION...] SRC... [DEST]
     //远程⽂件同步
Access via remote shell:
 Pull: rsync [OPTION...] [USER@]HOST:SRC... [DEST]
 Push: rsync [OPTION...] SRC... [USER@]HOST:DEST        
OPTION选项说明-v      -a      -r      -l    -p      -t      -g      -o      -D      -R      -H      -A      -e      
详细模式输出 
归档模式，递归的⽅式传输⽂件，并保持⽂件的属性，equals -rlptgoD
递归拷⻉⽬录
保留软链接
保留原有权限
保留原有时间（修改）
保留属组权限
保留属主权限
等于--devices  --specials    
保留相对路径
保留硬链接
保留ACL策略
表示⽀持b,c,s,p类型的⽂件
指定要执⾏的远程shell命令，ssh更改端⼝常⽤选项-E      -X      
保留可执⾏权限
保留扩展属性信息  a属

PUSH：推，相当于上传；PULL：拉，相当于下载

2、本地文件同步

本地⽂件同步简单理解就是把⽂件从⼀个位置（同步=>拷⻉）到另外⼀个位置（类似cp） 

[root@aaa ~]# mkdir /dir1
[root@aaa ~]# mkdir /dir2
[root@aaa ~]# mkdir /dir3
[root@aaa ~]# touch /dir1/file{1..3}
[root@aaa ~]# rsync -av /dir1/ /dir2
[root@aaa ~]# rsync -av /dir1/ /dir3 

案例：rsync -R选项的应⽤（保留相对路径）

案例：rsync --delete（删除⽬标⽬录⾥多余的⽂件）

/dir1 === /dir2

file1、file2 file1、file2、file3

rsync --delete同步后，会⾃动删除file3⽂件。（让dir1与dir2⽬录中的⽂件⾼度⼀致）

3、远程文件同步

要实现时远程同步，要求两台主机都应该安装rsync

Push：上传⽂件到远程服务器端

 # rsync -av 本地⽂件或⽬录 远程⽤户名@远程服务器的IP地址:⽬标路径

案例：把linux.txt⽂档传输到远程服务器端（10.1.1.100）

rsync -av linux.txt 

案例：把shop⽂件夹传输到远程服务器端（10.1.1.100）

rsync -av shop root@10.1.1.100:/root

Pull：下载⽂件到本地服务器端

 rsync -av 远程⽤户名@远程服务器的IP:⽬标⽂件或⽬录 本地存储位置

案例：把远程服务器（10.1.1.100）的/etc/hosts⽂件下载到本地

rsync -av root@10.1.1.100:/etc/hosts ./

案例：把远程服务器（10.1.1.100）的/shop⽂件夹下载到本地

rsync -av root@10.1.1.100:/shop ./

方法一、rsync在远程同步时，之所以要输⼊密码的主要原因在于其底层还是基于SSH服务的。SSH有 两种认证⽅式，如果没有配置免密则默认使⽤⽤户名+密码的认证⽅式。 不想要密码同步，可以考虑使⽤SSH免密操作。

Code => Backup

Code：

 ssh-keygen -t rsa -P ""
 # ssh-copy-id root@10.1.1.100

方法二、如果Backup服务器端更改了SSH的默认密码，那这个数据该如何？

 rsync -e "ssh -p 10086" -av rsync.txt root@10.1.1.100:/root

4、rsync作为系统服务

默认情况下，rsync只是作为⼀个命令来进⾏使⽤的（ps在查询进程时，找不到对应的服 务），但是rsync提供了⼀种作为系统服务的实现⽅式。

Linux系统服务的思路： 对外提供服务——>端⼝监听——>==启动服务==——>启动脚本——>配置⽂件

第⼀步：启动rsyncd服务（CentOS6中没有，CentOS7中有这个服务）

systemctl start rsyncd

如果企业中使⽤到操作系统为CentOS6版本，则没有启动脚本。必须求帮助：

[root@aaa ~]# man rsync
[root@aaa ~]# rsync --help
 Use "rsync --daemon --help" to see the daemon-mode command-line options.
 CentOS6：rsync作为系统服务
[root@aaa ~]# touch /etc/rsyncd.conf
[root@aaa ~]# rsync --daemon
[root@aaa ~]# netstat -tunlp | grep rsync 
[root@aaa ~]# ps -ef | grep rsync

注：如果rsync作为系统服务单独运⾏，则其底层就不需要SSH服务了！

第⼆步：rsyncd服务的配置⽂件/etc/rsyncd.conf

[root@aaa ~]# man 5 rsyncd.conf

三、任务解决方案（重点）

1、环境准备

第⼀步：关闭防⽕墙与SELinux

 systemctl stop firewalld
 systemctl disable firewalld
 setenforce 0
 vim /etc/selinux/config
 SELINUX=disabled

第⼆步：更改主机名称

 hostnamectl set-hostname code.itcast.cn
 hostnamectl set-hostname backup.itcast.cn
 su

第三步：更改IP地址（静态IP）

vim /etc/sysconfig/network-scripts/ifcfg-ens33
 TYPE="Ethernet"
 BOOTPROTO="none"
 IPADDR=10.1.1.10
 NETMASK=255.255.255.0
 GATEWAY=10.1.1.2
 DNS1=8.8.8.8
 DNS2=114.114.114.114
 NAME="ens33"
 UUID="a5bb176c-c05c-4bdb-8975-a4aafa2fc90u"     =>    更改UUID的后3位
 DEVICE="ens33"
 ONBOOT="yes"
vim /etc/sysconfig/network-scripts/ifcfg-ens33
 TYPE="Ethernet"
 BOOTPROTO="none"
 IPADDR=10.1.1.100
 NETMASK=255.255.255.0
 GATEWAY=10.1.1.2
 DNS1=8.8.8.8
 DNS2=114.114.114.114
 NAME="ens33"
 UUID="a5bb176c-c05c-4bdb-8975-a4aafa2fc56y"     =>    更改UUID的后3位
 DEVICE="ens33"
 ONBOOT="yes"
systemctl restart network

第四步：关闭NetworkManager

 systemctl stop NetworkManager
 systemctl disable NetworkManage

第五步：时间同步

 ntpdate cn.ntp.org.cn

2、任务解决方案

==Code：10.1.1.10服务器==

第⼀步：准备代码⽂件

[root@aaa ~]# mkdir /app/java_project -p
[root@aaa ~]# mkdir /app/java_project/aa{1..3}
[root@aaa ~]# mkdir /app/java_project/file{1..9}.java

第⼆步：把rsync作为系统服务运⾏

[root@aaa ~]# vim /etc/rsyncd.conf

[root@aaa ~]# systemctl start rsyncd
[root@aaa ~]# ps -ef | grep rsync
[root@aaa ~]# netstat -tnlp | grep rsync

==Backup：10.1.1.100==

第三步：创建备份⽬录

[root@aaa ~]# mkdir /backup/app1_java -p

第四步：测试rsync是否可以连接到rsync服务

 rsync -a root@10.1.1.10::
 app-a：获取rsync服务对应的同步⽬录标签

下载⽂件到本地

 rsync -av root@10.1.1.10::app /backup/app1_java

第五步：编写计划任务 + Shell的脚本⽂件，⾃动实现代码备份

① 编写计划任务

[root@aaa ~]# crontab -e

② 编写rsync_java.sh脚本程序

vim rsync_java.sh
 #!/bin/bash
 rsync -av root@10.1.1.10::app /backup/app1_java &>/dev/null
chmod +x rsync_java.s