rsyns备份

已于 2024-05-30 23:41:04 修改
阅读量659 收藏 17
点赞数 32
分类专栏： 架构篇 文章标签： linux 云计算
于 2024-05-30 23:07:54 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/luck_boy996/article/details/139336764
版权

虚拟机前期准备

添加第二块网卡，选择LAN区段连接

image-20240520142044563

更改网卡名为eth0

image-20240514141220568

系统优化

vim optimize.sh
#!/bin/bash
rm -f /etc/yum.repos.d/*
curl -o /etc/yum.repos.d/CentOS-Base.repo https://mirrors.aliyun.com/repo/Centos-7.repo
curl -o /etc/yum.repos.d/epel.repo https://mirrors.aliyun.com/repo/epel-7.repo
sed -i '/mirrors.aliyuncs.com/d' /etc/yum.repos.d/CentOS-Base.repo		#优化删除不需要的源址
sed -i '/mirrors.cloud.aliyuncs.com/d' /etc/yum.repos.d/CentOS-Base.repo #优化删除不需要的源址
yum install net-tools vim tree htop iftop gcc gcc-c++ glibc iotop lrzsz wget unzip telnet nmap nc psmisc dos2unix bash-completion bash-completion-extra sysstat rsync nfs-utils httpd-tools -y
systemctl disable firewalld
systemctl stop firewalld
sed -i 's#SELINUX=enforcing#SELINUX=disabled#g' /etc/sysconfig/selinux	
sed -i 's#SELINUX=enforcing#SELINUX=disabled#g' /etc/selinux/config		#永久关闭seliux
setenforce 0
echo -e '#Sync System Time\n* * * * * /usr/sbin/ntpdate ntp1.aliyun.com &>/dev/null' >/var/spool/cron/root		#定时任务同步系统时间
echo '* - nofile 65535' >> /etc/security/limits.conf		#调整单个进程最大能打开文件的数量

vim ip_host.sh
#!/bin/bash
#read -p "请输入要修改的IP地址最后一位: " ip
#read -p "请输入要修改的主机名: " host_name
#sed -i "s#100#$ip#g" /etc/sysconfig/network-scripts/ifcfg-ens33
#hostnamectl set-hostname $host_name

read -p "Please Input Hostname: " host_name
hostnamectl set-hostname $host_name
read -p "Please Input Ip Address: " host_ip
sed -i "s#101#$host_ip#g" /etc/sysconfig/network-scripts/ifcfg-eth{0,1}  #指定原ip为101精准替换（原ip不是101无效，尝试设定为一个变量）
systemctl restart network

rsync介绍

rsync是一款开源、快速、多功能、可实现全量及增量的本地或远程数据同步备份的优秀工具。rsync软 件适用于Unix/linux/Windows等多种操作系统平台。

类似于ssh带的scp命令，但是又优于scp命令的功能，scp每次都是全量拷贝，而rsync可以增量拷贝

## 文件推送：scp 源文件 用户名@主机IP:/指定目录
[root@web01 ~]# scp -r /etc root@10.0.0.41:/backup  #-r递归
[root@backup ~]# scp base.sh root@10.0.0.7:/tmp

## 文件拉取：scp 用户名@主机IP:/指定文件（远程目标文件） 本地路径
[root@web01 ~]# scp root@10.0.0.41:/root/1.txt ./

rsync监听端口：873
rsync运行模式：C/S


#利用rsync还可以实现删除文件和目录的功能，这又相当于rm命令，一个rsync相当于scp、cp、rm，但是还优于他们的每一个命令。
[root@web01 ~]# rsync 1.txt /opt/    #本地备份

[root@web01 ~]# rsync -avz --delete /etc/ root@10.0.0.41:/root/backup	#rsync的同步删除
root@10.0.0.41's password: 
sending incremental file list
deleting 1.txt
./

sent 45,147 bytes  received 637 bytes  13,081.14 bytes/sec
total size is 27,254,438  speedup is 595.28

rsync特性

支持拷贝特殊文件，如连接文件、设备等。
可以有排除指定文件或目录同步的功能，相当于打包命令t的排除功能。
可以做到保持原文件或目录的权限、时间、软硬链接、属主、组等所有属性均不改变-P.
可以实现增量同步，既只同步发生变化的数据，因此数据传输效率很高(ta-N).
可以使用rcp、rsh、ssh等方式来配合传输文件(rsync本身不对数据加密)。
可以通过socket（进程方式）传输文件和数据（服务端和客户端）*。
支持匿名的活认证（无需系统用户）的进程模式传输，可以实现方便安全的进行数据备份和镜像。

备份类型

  • 全量备份（scp）

image-20240514144823400

全量备份，将客户端所有的数据内容 file1 file2 file3 全部备份至服务端 (效率低下, 占用空间)

  • 增量备份（rsync）

image-20240514144900312

增量备份，将客户端的 file2 file3 增量备份至服务端 (提高备份效率,节省空间, 适合异地备份 )

Rsync应用场景

1.推: 所有主机推送本地数据至Rsync备份服务器，会导致数据同步缓慢(适合少量数据备份)

image-20240514145125490

2.拉: rsync备份服务端拉取所有主机上的数据，会导致备份服务器开销大

image-20240514145458568

3.大量服务器备份场景

image-20240514145552146

4.异地备份实现思路

image-20240514145607691

rsync传输模式

man rsync
SYNOPSIS
       Local:  rsync [OPTION...] SRC... [DEST]	#本地

       Access via remote shell:		#远程
         Pull: rsync [OPTION...] [USER@]HOST:SRC... [DEST]
         Push: rsync [OPTION...] SRC... [USER@]HOST:DEST

       Access via rsync daemon:
         Pull: rsync [OPTION...] [USER@]HOST::SRC... [DEST]
               rsync [OPTION...] rsync://[USER@]HOST[:PORT]/SRC... [DEST]
         Push: rsync [OPTION...] SRC... [USER@]HOST::DEST
               rsync [OPTION...] SRC... rsync://[USER@]HOST[:PORT]/DEST

#推送服务端的目录须是已存在的目录
# 本地模式：类似cp命令，本地拷贝目录或文件
[root@web01 ~]# rsync /root/base.sh /usr/local/
rsync [OPTION...] SRC... [DEST]
rsync [选项...] 源文件... 目标路径

# 远程模式：类似scp命令 基于ssh协议		（ssh服务停掉，rsync远程就不能传输）
## 拉：rsync [OPTION...] [USER@]HOST:SRC... [DEST]
rsync [选项...] [用户@]主机IP:源文件... 本机的目标路径
[root@web01 ~]# scp 1.txt 10.0.0.41:/opt
[root@web01 ~]# rsync 1.txt 10.0.0.41:/usr/local

## 推：Push: rsync [OPTION...] SRC... [USER@]HOST:DEST
rsync [选项...] 本机的源文件 [用户@]主机IP:目标路径
[root@web01 ~]# scp /root/1.txt root@10.0.0.8:/root/
[root@web01 ~]# rsync /root/base.sh root@10.0.0.8:/root/

# 守护进程（防止ssh服务被关闭，不走ssh服务）
#推   
Pull: rsync [OPTION...] [USER@]HOST::SRC... [DEST]
# rsync [选项...] [匿名用户@]主机IP::模块名... 目标路径
rsync [OPTION...] rsync://[USER@]HOST[:PORT]/SRC... [DEST]

Push: rsync [OPTION...] SRC... [USER@]HOST::DEST
# rsync [选项...] 源文件... [匿名用户@]主机IP::模块名
rsync [OPTION...] SRC... rsync://[USER@]HOST[:PORT]/DEST
rsync [选项...] 源文件... [匿名用户@]主机IP::模块名

rsync选项

选项作用
-a归档传输
-v显示传输过程
-z压缩传输
–delete无差异传输（会删除不存在的文件）

rsync实战

环境准备

主机名外网ip内网ip角色应用
backup10.0.0.41172.16.1.41仓库（存储所有备份数据的机器）服务端rsync的服务端
web0110.0.0.7172.16.1.7需要备份数据的机器，客户端rsync的客户端
web0210.0.0.8172.16.1.8需要备份数据的机器，客户端rsync的客户端

安装rsync服务端与客户端

## rsync-server 和 rsync-client
[root@web01 ~]# yum install -y rsync

配置rsync服务端

# 1.修改服务端的配置文件
[root@backup ~]# vi /etc/rsyncd.conf
uid = rsync		## 启动rsync服务的用户
gid = rsync		## 启动rsync服务的用户组
port = 873		## rsync协议的端口（默认端口）
fake super = yes	## 无需让rsync以root身份运行，也可以接受完整的文件
use chroot = no		## 禁锢目录
max connections = 200	## 最大连接数
timeout = 600		## 超时时间
ignore errors		## 忽略错误
read only = false	## 关闭只读
list = false		## 禁止查看模块信息

auth users = rsync_backup			## 认证用户（匿名用户）
secrets file = /etc/rsync.passwd	## 密码文件
log file = /var/log/rsyncd.log		## 日志文件
[lgj]				## 模块名
comment = xxx		## 注释
path = /backup		## 服务端备份的路径
##################################################

# 2.创建服务启动用户
[root@backup ~]# useradd rsync -s /sbin/nologin -M
# 3.创建备份目录
[root@backup ~]# mkdir -p /backup
# 4.授权目录
[root@backup ~]# chown rsync.rsync /backup/
# 5.创建密码文件
[root@backup ~]# vi /etc/rsync.passwd
rsync_backup:123
# 6.授权
[root@backup ~]# chmod 600 /etc/rsync.passwd
[root@backup ~]# chown rsync.rsync /backup	#更改为启动用户的属主属组
# 7.启动服务
[root@backup ~]# systemctl start rsyncd
[root@backup ~]# systemctl enable rsyncd
# 8.检查服务是否启动成功
[root@backup ~]# ps -ef|grep rsync
root 18475 1 0 11:43 ? 00:00:00 /usr/bin/rsync --daemon --nodetach
[root@backup ~]# netstat -lntup|grep rsync
tcp 0 0 0.0.0.0:873 0.0.0.0:* LISTEN
18475/rsync
tcp6 0 0 :::873 :::* LISTEN
18475/rsync



uid = rsync
gid = rsync
port = 873
fake super = yes
use chroot = no
max connections = 200
timeout = 600
ignore errors
read only = false
list = false
auth users = rsync_backup
secrets file = /etc/rsync.passwd
log file = /var/log/rsyncd.log
[lgj]
comment = xxx
path = /backup

客户端推送&拉取命令

#拉取客户端文件
[root@web01 ~]# rsync -avz rsync_backup@172.16.1.41::lgj /opt/	#拉取客户端下/backup（配置文件下模块路径）下所有文件 到opt下

#推送命令
[root@web01 ~]# rsync -avz base.sh rsync_backup@172.16.1.41::lgj
Password: 123
## rsync免交互推送
# 1.客户端配置密码文件（和服务端secrets file文件密码对应上）
[root@web01 ~]# vi /etc/lgj_rsync.pass  （存放密码文件可以在  客户端  任意位置）
123
# 2.客户端密码文件授权
[root@web01 ~]# chmod 600 /etc/lgj_rsync.pass
# 3.客户端推送数据
[root@web01 ~]# rsync -avz /etc rsync_backup@172.16.1.41::lgj --password-file=/etc/lgj_rsync.pass

s file文件密码对应上）
[root@web01 ~]# vi /etc/lgj_rsync.pass （存放密码文件可以在 客户端 任意位置）
123

2.客户端密码文件授权

[root@web01 ~]# chmod 600 /etc/lgj_rsync.pass

3.客户端推送数据

[root@web01 ~]# rsync -avz /etc rsync_backup@172.16.1.41::lgj --password-file=/etc/lgj_rsync.pass

盛夏の晚风
关注
  • 32
    点赞
  • 踩
  • 17
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
rsync远程同步——配置rsync源服务器
woody_0011的博客
12-30 2231
简介： 正确、有效的备份方案是保障系统及数据安全的重要手段。在服务器中，通常会结合计划任务。Shell脚本来执行本地备份。为了进一步提高备份的可靠性，使用异地备份也是非常有必要的。 今天主要学习rsync工具的使用，以实现快速、安全、高效的异地备份，如构建web镜像站点。 一、配置rsync源服务器 rsync是一个开源的快速备份工具，可以在不同主机之间镜像同步整个目录树，支持增量
rsync实时更新监控备份
mylovewxl
12-12 324
配置目标服务器（放备份的机器） //关闭防火墙和selinux [root@server ~]# systemctl stop firewalld [root@server ~]# systemctl disable firewalld Removed symlink /etc/systemd/system/multi-user.target.wants/firewalld.service. Re...
session rsyns 的工作原理
weixin_38920945的博客
05-11 98
session的工作原理1.session实现与工作原理浏览器和服务器采用http无状态的通讯，为了保持客户端的状态，使用session来达到这个目的。然而服务端是怎么样标示不同的客户端或用户呢？这里我们可以使用生活中的一个例子，假如你参加一个晚会，认识了很多人，你会采取什么方式来区分不同的人呢！你可能根据脸型，也有可能根据用户的名字，或者人的×××，即采用一个独一无二的标...
Remote Syns 远程同步/增量备份
Chengchengsj的博客
10-25 681
配置 rsync 源 服务器
rsync远程同步（可爱可抵漫长岁月）
Y0UZI的博客
07-04 123
什么是rsync？rsync（Remote Sync，远程同步）是一个开源的快速备份工具，可以在不同主机之间镜像同步整个目录树，支持增量备份，并保持链接和权限，且采用优化的同步算法，传输前执行压缩，因此非常适用于异地备份、镜像服务器等应用。在远程同步任务中，负责发起rsync同步操作的客户机称为发起端，而负责响应来自客户机的rsync同步操作的服务器称为同步源。在同步过程中，同步源负责提供文件的原始位置，发起端应对该位置具有读取权限。
centos 备份工具
竹荪养兔
01-01 713
tar , rsyns
使用 rsync 来备份 Linux 系统
weixin_34009794的博客
08-15 82
在系统管理员的工作中备份无疑是一个重要的部分。当没有完整备份或者良好规划的备份和实施时，就可能或早或晚不可挽回地丢失重要的数据。 所有公司，无论大小，都运营在数据之上。考虑到丢失业务数据造成的经济和业务损失，从最小的个人公司到最大的跨国企业，没有一个公司能在丢失大部分数据以后得以幸存。你的办公室可以通过保险赔偿重建，但是你的数据就不可能再恢复了...
rsync实时备份备份服务搭建和使用指南
weixin_30687587的博客
04-26 90
一.Rsync企业工作场景说明: 1.利用定时任务+rsync方式实现数据同步 对于网站内部技术人员创建的数据，可以采取定时任务的方式 2.利用实时任务+rsync方式实现数据同步 对于网站外部访问用户创建的数据，可以采取实时同步的方式 3.推送的方法 rsync -rp root@10.0.0.10:/opt/hosts /etc rsy...
rsync+inotify实现全网自动化数据备份-技术流ken
weixin_34315485的博客
10-02 140
rsync简介 “rsync是linux系统下的数据镜像备份工具。使用快速增量备份工具Remote Sync可以远程同步，支持本地复制，或者与其他SSH、rsync主机同步” rsync的功能和特点 1. 可以实现服务器各种资源的备份（可以夸文件系统） 2. linux-rsync，windows-cwrsync 3. 可以做全量备份，也可以做增量备份 4. 在...
使用rsync定期同步windows系统文件到Linux系统
BRAVE MAN的博客
11-29 1392
1 Windows 平台 cwRsync 安装配置成客户端，通过设置计划任务每 5 分钟推文件到 linux 的 rsync 服务端。 2 linux 配置成服务端。 3 记录同步详细日志，linux平台记录日志。 4 只同步新增或者修改过的不一样的文件，忽略时间、权限的同步。 示意图如下： 1 2 3 4 5 +----------...
rsync定时同步文件
qq_42352516的博客
06-09 1449
Linux 环境自动备份文件 1、先安装rsync yum install rsync 2、写一个shell脚本rsync_file.sh #!/usr/bin/env bash function rsync_file(){ pwds='123456' datestr=`date` echo -e "\033[32m =========== 开始备份 ========== \033[0m" # \033[32m的解释见链接: https://blog.csdn.net/panpan639944806/
rsync+inotify远程同步
weixin_67582338的博客
07-06 1791
目录前言一、Rsync 远程同步1.1 rsync 介绍1.2 rsync 同步方式1.3 rsync特性1.4 rsync与cp、scp对比1.5 rsync实时同步二、rsync 命令2.1 命令格式2.2 常用的参数2.3 rsync本地复制实例2.4 配置源的两种表示方法三、配置 Rsync 源服务器3.1 rsync 同步源3.2 配置 Rsync 下行同步3.2.1 配置环境3.2.2 将 server 服务器数据备份到 client 服务器 3.2.3 客户端
rsync
向往黑暗
12-12 919
文章目录1. rsync简介2. rsync特性3. rsync的ssh认证协议4. rsync命令5. rsync+inotify 1. rsync简介 rsync是lnux系统下的数据镜像备份工具。使用快速增量备份工具Remote Sync可以远程同步，支持本地复制，或者与其他SSH、rsync主机同步。 2. rsync特性 rsync支持很多特性： 可以镜像保存整个目录树和文件系统 ...
在Ubuntu/Linux下重温FC游戏——超级玛丽奥
bluebird_shao的专栏
09-02 842
FC 模拟器是指能够在某种机器上运行 FC 游戏的程序，FC 模拟器有好几种，Linux 平台下的 FCEUX 是一款功能强大的免费 FC/NES 模拟器，你可以使用它重温那些经典的游戏。
Linux高性能服务器编程 总结索引 | 第2章：IP协议详解
AsherGu的博客
08-29 1120
IP服务的特点；IPv4头部结构；IP分片；IP路由：IP模块工作流程，路由机制，路由表更新；IP转发；重定向；IPv6头部结构：IPv6固定头部结构，IPv6扩展头部
[Linux]：基本指令(下)
最新发布
Bettysweetyaaa的博客
09-02 808
想成为 Linux 高手吗？本文介绍了 tac、more、less 等多种指令，涵盖文件查看、时间、搜索等方面，还有实用快捷键。快来学习，提升你的 Linux 操作技能，让工作更高效！
Linux的常见指令
2302_79964175的博客
08-31 2131
Hello,今天我们继续学习Liunx，上期我们简单了解了Linux的基本用处，并了解了Linux的重要性，今天我们就继续更加深入的学习Linux，进行指令方面的学习，我们可以通过先学习简单的基础命令来学习Linux，并在从充分了解了基础就只是的前提下，进行Linux实战。好，我们还是按例三连上车，开始我们今天的正题！！语法： ls[选项][目录或文件]功能：对于目录，该命令列出在该目录下的所有子目录和文件。对于文件，将列出文件名你给的以及其他信息的常用的选项：举例：这个命令十分的简单，它的作用其实就是显示
在linux 中如何将.c 文件转换为可执行文件
千千道的博客
08-29 1629
在 Linux 环境下进行 C 语言编程时，将.c文件转换为可执行文件是一个关键的步骤。这个过程涉及到使用编译器和一些相关的工具，本文将详细介绍在 Linux 系统中如何将.c文件转换为可执行文件的方法。
Linux 命令行快捷键
sun007700的专栏
08-30 511
涉及在linux命令行下进行快速移动光标、命令编辑、编辑后执行历史命令、Bang(!Ctrl+y: 粘贴Ctrl+u或ctrl+k剪切的内容。Alt – d ：由光标位置开始，往右删除单词。Alt – d: 先按住 Alt 键，然后再按 d 键；Ctrl+u：删除当前光标前面的文字 (还有剪切功能)Ctrl+k：删除当前光标后面的文字 (还有剪切功能)M – k：先单击 Esc 键，然后再按 k 键。Ctrl+w: 删除光标前面的单词。Ctrl+左右键:在单词之间跳转。Ctrl+a: 跳到本行的行首。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值