rsync 参数 --01

最新推荐文章于 2023-04-05 17:56:06 发布
最新推荐文章于 2023-04-05 17:56:06 发布
阅读量906 收藏
点赞数
分类专栏： 集群架构 文章标签： ssh 服务器 linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/mm970919/article/details/122068402
版权
架构-- rsync
一 、主机名字与网卡修改脚本
[root@nfs ~]# cat zhuji.sh 
#！/bin/bash
hostnamectl set-hostname $1
sed -i "s#41#$2#g" /etc/sysconfig/network-scripts/ifcfg-eth0
sed -i "s#41#$2#g" /etc/sysconfig/network-scripts/ifcfg-eth1
systemctl restart network
二 、rsync （做备份服务器,相当于就是远程备份）
本地备份：cp
远程备份：scp  （scp -r 是复制目录） rsync
rsync 简介
rsync英文称为remote synchronizetion，从软件的名称就可以看出来，rsync具有可使本地和远程两台主机之间的数据快速复制同步镜像、远程备份的功能，这个功能类似于ssh带的scp命令，但是又优于scp命令的功能，scp每次都是全量拷贝，而rsync可以增量拷贝。当然，rsync还可以在本地主机的不同分区或目录之间全量及增量的复制数据，这又类似cp命令。但是同样也优于cp命令，cp每次都是全量拷贝，而rsync可以增量拷贝。

rsync官方地址：https://rsync.samba.org/

rsync监听端口：873

rsync运行模式：C/S   客户端client/server  服务端

rsync简称叫做远程同步，可以实现不同主机之间的数据同步，还支持全量和增量
rsync 特性
 可以通过socket（进程方式）传输文件和数据（服务端和客户端）*****

 支持匿名的活认证（无需系统用户）的进程模式传输，可以实现方便安全的进行数据备份和镜像
 
 实例

scp -r  /etc root@172.16.1.41: /tmp        scp全量推送    
                                           -r 是递归推送

rsync -avz /var root@172.16.1.41: /tmp

rsync 参数

                -a           #归档模式传输, 等于-tropgDl    -t -r -o -p -g -D -l
                -v           #详细模式输出, 打印速率, 文件数量等
                -z           #传输时进行压缩以提高效率
                -n           #会提示拷贝的内容，但是不会真正的拷贝
          –exclude-from=file #排除参数
         --bwlimit=100       #限速传输
         --delete            # 排除
         --include           #包含
         -P                  #显示传输的进度信息 
         -R                  #相对路径
         --backup            #保留
         --partial           #断点续传
  --backup --suffix=".bak"   #定制后缀名
 --backup --backup-dir=/a/bak#定制文件目录
         
[root@backup ~]# rsync -avzP --bwlimit=10 /tmp/egon.txt rsync_mm@192.168.12.41::backup

rsync应用场景

全量备份：将数据完整的复制一份保留下了

增量备份： 备份上一此备份后新增的数据

差异备份：就是与上上次的差异数据

push 推：
从客户端将数据推送至服务端

pull 拉：
客户端将数据拉取到本地

格式区别：
rsync -avz rewriteip.sh rsync_mm@172.16.1.41::backup 推
	本地文件路径在前，目标ip在后
rsync -avz rsync_mm@172.16.1.41::backup /tmp/ 拉
	目标ip在前，目标文件路径在后
传输方式
# push 推：

 从客户端将数据推送至服务端

# pull 拉：

 客户端将数据拉取到本地

格式区别：
  rsync -avz a.sh rsync_mm@172.16.1.41::backup 推
  本地文件路径在前，目标ip在后
  rsync -avz rsync_mm@172.16.1.41::backup /tmp/ 拉
  目标ip在前，目标文件路径在后	
#注：
1.推的问题：当客户端服务器数量过多，容易造成数据推送缓慢
2.拉的问题：当客户端服务器数量过多，容易造成服务端压力过大
传输模式
1.本地方式（类似于cp，不支持推送和拉取，只是单纯的复制）
#语法：
rsync [OPTION]... SRC [SRC]... DEST
命令   选项        源文件       目标地址

#语法实例
[root@web01 ~]# rsync -avz rewriteip.sh /tmp/

#命令拆分
rsync 				#命令
-avz 				#选项
rewriteip.sh 		#源文件
/tmp/				#目标位置

#类似于cp，但是cp是全量复制并且会修改文件属性，rsync是增量复制，会保证文件属性不表
2.远程方式（类似于scp，又不同于scp）
## 例2：推送1.txt到目标ip
rsync -avz /root/2.txt 10.0.0.7:/tmp  (默认当前root用户)


PULL 拉取数据的命令

#语法：
rsync [OPTION]... [USER@]HOST:SRC [DEST]

#实例：
[root@web01 ~]# rsync -avz root@172.16.1.41:/tmp/a.sh /opt/

#语法拆分
rsync 			#命令
-avz 			#选项
root			#远端服务器的系统用户
@				#分隔符
172.16.1.41		#远程主机的地址
:				#分隔符，代表主机下的....
/tmp/a.sh 		#远程主机的目录及文件
/opt/		    #当前主机的当前目录

#注：拉取过程中，如果拉取加根/（/tmp/aa/），目录及文件同时拉取

push 推送方式

#实例
[root@web01 ~]# rsync -avz /opt/s.sh root@172.16.1.41:/tmp

#语法拆分
rsync 				#命令
-avz 				#选项
/opt/s.sh		    #当前服务器的本地文件
root				#远端服务器的系统用户
@					#分隔符
172.16.1.41			#远端主机的IP地址
:					#分隔符，代表主机下的....
/tmp				#远程主机的目录

#注：推送过程中，如果推送内容中加根/，目录中的文件则推送
#注：推送过程中，如果推送内容中不加根/，目录本身以及文件都会推送
3.守护进程方式（客户端和服务端）
#为什么用守护进程
1.rsync传输时，使用的是系统用户和系统用户的密码，非常的不安全
2.使用普通用又会出现权限问题
守护进程模式实践
环境准备
主机IP主机角色安装软件
web0110.10.0.7rsync客户端rsync
backup10.10.0.41rsync服务端rsync
编辑服务端配置文件 – backup

rsync文件详解

[root@backup ~]# vim /etc/rsyncd.conf
#配置文件详解
uid = rsync							             #启动服务的用户id
gid = rsync							             #启动服务用户的组id
port = 873							             #服务默认监听端口
fake super = yes					             #无须使用root用户启动
use chroot = no						             #安全机制
max connections = 200				              #最大连接数
timeout = 200						             #超时时间
ignore errors						             #忽略错误
read only = false					             #只读权限
list = false （true）						        #查看模块列表 （开启列表）
auth users = rsync_mm		                     #定义虚拟用户（rsync传输过程使用的用户）
secrets file = /etc/rsync.passwd	             #定义虚拟用户的密码
log file = /var/log/rsyncd.log		             #日志文件
==========================================================================
[backup]								         #模块
comment = welcome to oldboyedu backup!	         #模块的备注
path = /backup							         #服务器真实的路径

细部配置

[root@backup]# cat /etc/rsyncd.conf 
uid = rsync
gid = rsync
port = 873
fake super = yes
use chroot = no
max connections = 200
timeout = 200
ignore errors
read only = false
list = false
auth users = rsync_mm
secrets file = /etc/rsync.passwd
log file = /var/log/rsyncd.log
[backup]
comment = welcome to oldboyedu backup!
path = /backup/

编辑服务端用户文件 – backup
1.创建用户
[root@backup ~]# useradd rsync -s /sbin/nologin -M

2.创建密码文件（一定不能有空格）
[root@backup ~]# echo "rsync_mm:123" > /etc/rsync.passwd
[root@backup ~]# chmod 600 /etc/rsync.passwd

3.创建备份目录
[root@backup ~]# mkdir /backup

4.授权备份目录
[root@backup ~]# chown -R rsync.rsync /backup/

5、启动服务
[root@backup ~]# systemctl start rsyncd
[root@backup ~]# rysnc --daemon  #这个是守护进程模式
## 当前登录的用户是谁，登录rsync进程的就是谁  
[root@backup ~] #rsync -avz a.tt rsync://rsync_mm@172.16.1.41:879/backup
                 #端口是979端口
#验证启动
[root@backup ~]# netstat -lntp | grep 873
tcp        0      0 0.0.0.0:873             0.0.0.0:*               LISTEN      26370/rsync         
tcp6       0      0 :::873                  :::*                    LISTEN      26370/rsync         
[root@backup ~]# ps -ef | grep rsync
root      26370      1  0 11:08 ?        00:00:00 /usr/bin/rsync --daemon --no-detach
root      26408  25098  0 11:09 pts/1    00:00:00 grep --color=auto rsync

守护进程传输模式语法
#实例：
[root@web01 ~]# rsync -avz p.sh rsync_mm@172.16.1.41::backup  
                                             #backup是模板名（中括号里面的名字）

#语法拆分
rsync 				#命令	
-avz 				#选项
p.sh 		        #当前服务器的文件
rsync_backup		#rsync服务端配置的虚拟用户
@					#分隔符
172.16.1.41			#远程主机IP地址
::backup			#模块名

#推送过程中服务端目录必须是服务端配置的启动用户权限

###拉取语法

#示例：
[root@web01 ~]# rsync -avz rsync_mm@172.16.1.41::backup /tmp/

#语法拆分：
rsync 				#命令
-avz 				#选项
rsync_backup		#服务端定义的虚拟用户
@					#分隔符
172.16.1.41			#远程主机IP地址
::backup 			#模块名字
/tmp/				#当前主机的目录

#拉取过程中服务端目录不用设置rsync用户权限

客户端推拉数据方法 — 免密推拉
#指定密码文件的方式

1.创建密码文件
[root@web01 ~]# echo "123" > /etc/rsync.passwd
[root@web01 ~]# chmod 600 /etc/rsync.passwd 

2.使用参数传输
[root@web01 ~]# rsync -avz rewp.sh rsync_mm@172.16.1.41::backup --password-file=/etc/rsync.passwd
sending incremental file list
rewriteip.sh

sent 207 bytes  received 43 bytes  166.67 bytes/sec
total size is 194  speedup is 0.78

3.环境变量设置密码：                         
[root@web01 ~]# export RSYNC_PASSWORD=123
[root@web01 ~]# rsync -avz reip.sh rsync_mm@172.16.1.41::backup
sending incremental file list

sent 55 bytes  received 20 bytes  50.00 bytes/sec
total size is 194  speedup is 2.59

环境变量永久修改 — /etc/profile.d/*.sh
[root@web01 /]# cat /etc/profile.d/a.sh 

 export RSYNC_PASSWORD=12
rsync 常见的报错列表
1.报错内容：
[root@web01 ~]# rsync -avz rewriteip.sh rsync_backu@172.16.1.41::backup
Password: 

##  @ERROR: auth failed on module backup   -- 认证失败

rsync error: error starting client-server protocol (code 5) at main.c(1649) [sender=3.1.2]

#原因：
      1  虚拟用户的用户名或者密码错误
      2  服务端密码文件权限不为600

2.报错内容：
[root@web01 ~]# rsync -avz rewriteip.sh rsync_backup@172.16.1.41::backup --password-file=/etc/rsync.passwd

##  ERROR: password file must not be other-accessible   --权限不足

rsync error: syntax or usage error (code 1) at authenticate.c(196) [sender=3.1.2]

#原因：客户端密码文件权限不是600

3.报错内容：
[root@web01 ~]# rsync -avz rewriteip.sh rsync_backup@172.16.1.41::backu

@ERROR: Unknown module 'backu'  -- 模块名字错误

rsync error: error starting client-server protocol (code 5) at main.c(1649) [sender=3.1.2]

#原因：模块名字错误

4.报错内容：
[root@web01 ~]# rsync -avz rewriteip.sh rsync_backup@172.16.1.41::/backup

ERROR: The remote path must start with a module name not a /  --模板前面不要加/

rsync error: error starting client-server protocol (code 5) at main.c(1649) [sender=3.1.2]

#原因：双冒号后面跟的是模块名字，而不是目录名字不要加/

5.报错内容：
[root@web01 ~]# rsync -avz rewriteip.sh rsync_backup@172.16.1.41::backup

rsync: failed to connect to 172.16.1.41 (172.16.1.41): No route to host (113)

rsync error: error in socket IO (code 10) at clientserver.c(125) [sender=3.1.2]

#原因：防火墙开启，没有配置防火墙规则

[root@backup ~]# firewall-cmd --add-port=873/tcp    --配置防火墙规则
                 
                 firewall-cmd  --list-all           --查看防火墙列表

success

6.报错内容：
[root@web01 ~]# rsync -avz rewriteip.sh rsync_backup@172.16.1.41::backup
Password: 

sending incremental file list
rewriteip.sh
rsync: mkstemp ".rewriteip.sh.vx4Cry" (in backup) failed: Permission denied (13)

sent 207 bytes  received 128 bytes  44.67 bytes/sec  ----selinux未关闭
total size is 194  speedup is 0.58
rsync error: some files/attrs were not transferred (see previous errors) (code 23) at main.c(1179) [sender=3.1.2]

#原因：selinux没有关闭

7.报错内容：
[root@web01 ~]# rsync -avz rewriteip.sh rsync_backup@172.16.1.41::backup

sending incremental file list
rsync: delete of stat xattr failed for "rewriteip.sh" (in backup): Permission denied (13)

sent 55 bytes  received 114 bytes  338.00 bytes/sec  ----服务端备份目录权限不是rsync
total size is 194  speedup is 1.15
rsync error: some files/attrs were not transferred (see previous errors) (code 23) at main.c(1179) [sender=3.1.2]

#原因：服务端备份目录权限不是rsync

8.报错内容
[root@web01 ~]# rsync -avz rewriteip.sh rsync_backup@172.16.1.41::backup

rsync: failed to connect to 172.16.1.41 (172.16.1.41): Connection refused (111)
rsync error: error in socket IO (code 10) at clientserver.c(125) [sender=3.1.2]

#原因：服务端服务没有启动   ==>< systemctl start resyncd

9.报错内容
[root@web01 ~]# rsync -avz ip.sh rsync_backup@10.0.0.41::backup 

sending incremental file list    
rsync: read error: Connection reset by peer (104)
rsync error: error in socket IO (code 10) at io.c(785) [sender=3.1.2]

#原因：服务端配置错误，导致启动问题(vim/etc/rsyncd.conf) ==> 服务端 ><==backup主机配置文件错误
FikL-09-19
关注
专栏目录
rsync-远程同步
weixin_63634809的博客
04-21 1970
文章目录一、rsync1.1 rsync简介1.2 rsync同步方式1.3 rsync特性1.4 rsync与cp、scp对比1.5 rsync命令1.6 rsync本地复制实例1.7 配置源的两种表示方法1.8 rsync 同步源二、配置 rsync 下行同步2.1 配置环境2.2 将 Master 服务器数据备份到 Slave 服务器三、 inotify3.1 配置rsync+Inotify 实时同步3.1.1 master 关闭只读模式并为共享目录赋权3.1.2 优化 Sl
rsync---备份命令
weixin_44676934的博客
06-13 466
文章目录一、功能二、命令格式三、选项说明四、常用示例4.1 拷贝本地文件4.2 将本地机器的内容拷贝到远程机器4.3 将远程机器的内容拷贝到本地机器 一、功能 rsync是一款开源的、快速的、多功能的、可实现全量及增量的本地或远程数据同步备份的优秀工具。rsync软件适用于unix/linux/windows等, 目前，已支持跨平台，可以在Windows与Linux间进行数据同步。 特征: 可以镜像保存整个目录树和文件系统; 可以很容易做到保持源文件的权限, 时间,软硬链接等; 无需特殊权限即可安装;
Rsync 常见错误及解决方法
weixin_34228662的博客
11-03 1370
Rsync 常见错误及解决方法时间2014-08-11 20:40:22LixiPHP原文http://blog.lixiphp.com/rsync-errors-solved/主题rsyncLinux由于阿里云SLB不提供ECS间的数据同步服务，如果部署在SLB后端ECS上的应用服务是无状态的，那么可以通过独立的ECS或RDS服务来存储数据；如果部署在SLB后...
RSYNC的架构手册
08-08
RSYNC的详细架设图解，希望能够帮助到有需要的人
架构-- rsync --01
明日之星
03-27 240
架构-- rsync 一 、主机名字与网卡修改脚本 [root@nfs ~]# cat zhuji.sh #！/bin/bash hostnamectl set-hostname $1 sed -i "s#41#$2#g" /etc/sysconfig/network-scripts/ifcfg-eth0 sed -i "s#41#$2#g" /etc/sysconfig/network-scripts/ifcfg-eth1 systemctl restart network 二 、rsync （做备份
rsync
dengtuo6341的博客
10-23 294
一、简介 1、认识 Rsync（remote synchronize）是一个远程数据同步工具，可通过LAN/WAN快速同步多台主机间的文件。Rsync使用所谓的“Rsync算法”来使本地和远 程两个主机之间的文件达到同步，这个算法只传送两个文件的不同部分，而不是每次都整份传送，因此速度相当快 Rsync支持大多数的类Unix系统，无论是Linux、Solaris还是BSD上都经过了...
rsync同步架构
weixin_42625143的博客
08-06 199
1.1 rsync服务器端配置 1.1.1 查看服务器端rsync版本 1.1.2 创建配置文件 默认安装好rsync程序后，并不会自动创建rsync的主配置文件，需要手工来创建，其主配置文件为“/etc/rsyncd.conf”，创建该文件 并插入如下内容： 复制代码 1 #Rsync server 2 #create by zhurui 18:15 2016-3-1 ...
rsync --remove-source-files同步rsync: sender failed to remove 文件名: Permission denied (13)
浴火成诗的博客
05-07 945
记录linux rsync --remove-source-files同步windows文件后删除源文件报错rsync: sender failed to remove 文件名: Permission denied (13)
rsync - 相关问题 - --log-file
gdfjhc的博客
02-23 1721
rsync - 相关问题 - --log-file
rsync命令排除文件和文件夹(exclude-from)
09-30
`rsync` 的 `exclude-from` 参数允许我们创建一个包含排除规则的文件，以此来忽略特定的文件和目录，提高同步效率，避免不必要的传输。 ### 一、`rsync` 命令的基本结构 基础的 `rsync` 命令格式如下： ```bash ...
rsync --delete参数详解
最新发布
05-11
rsync 是一款常用的文件同步和备份工具，而 --delete 则是 rsync 的一个常用参数，用于删除目标目录中不在源目录中的文件。具体而言，--delete 参数的作用如下： 1. 如果源目录中存在一个文件而目标目录中没有，则 ...
【集群架构之rsync备份服务】
qq_68631072的博客
06-07 448
集群架构 rsync 备份
Rsync+Inotify架构实现实时同步
ZHANG_H_A的博客
10-19 521
CentOS7 Rsync服务搭建-Rsync+Inotify架构实现实时同步 关于centos7版本上面搭建rsync服务并且实现实时同步 之前一直是在6版本上面搭建rsync服务，在7版本上面折腾了半天。此处总结下 inotify下载地址：http://github.com/downloads/rvoicilas/inotify-tools/inotify-tools-3.14.tar.
【运维知识进阶篇】集群架构-Rsync服务详解
吾日三省吾身，想出类拔萃，要把知识学牢，学全，学深，学广。
04-05 1018
这篇文章给大家详细讲解下Rsync服务，主要做日志收集，重要数据备份。我们要通过部署服务实现自动备份。rsync具有使本地和远程两台主机之间的数据快速复制同步镜像、远程备份的功能。类似于ssh的scp命令，但是scp每次都是全量拷贝，优势是保证数据的完整性、数据不丢失。rsync可以增量拷贝，就是只同步发生变化的目录或文件，速度更快，劣势是前面一个有问题，后面就都有问题。一般mysql数据库是一天一增量，一周一全量。
RSYNC服务器模式
zhaominyong的专栏
07-28 491
rsync 服务简介 上一节讲述了使用 rsync 客户命令进行同步和备份的内容。rsync 还可以以守护进程（daemon）方式运行，若一台主机以 daemon 模式运行 rsync，一般称其为 rsync 服务器。rsync 的 C/S 方式运行方式概述如下： rsync 客户端连接远程 rsync 守护进程进行数据同步。 rsync 服务器端要开启 rsyncd 服务，默认监听 873 端口，等待客户端去连接。 rsync 服务器可以 独立运行，也可由 Xinetd 运行。CentOS 默认以
rsync添加模块和推送
sanzang_xulong的博客
01-07 609
rsync在linux中是用来传输文件（远程同步）的工具。 [b]rsync连接有两种服务实现方式：[/b] 第一，基于远程shell的程序，比如ssh 这也是很早的ssh传输记录默认端口好像是22，好长时间不用了忘记了。 第二，其程序自身的“daemon”服务器模式，这种方式在公司比较常用，安全。 1.使用基于OPENSSH的服务方式是，远程主机（服务器端）不需要设置rsync...
Rsync模块配置及命令参数详解
weixin_33785972的博客
09-18 1324
1.rsyncd.conf配置文件 1.1 全局参数 在[moudle]之前的参数都是全局参数，也可以在全局参数下定义部分模块参数，这时该参数的值就是所有模块的默认值。 port：指定后台程序使用的端口号，默认是873 log file:指定rsync的日志文件，而不把日...
rsyncd - 模块常用配置说明
胡争辉
01-30 1138
 rsyncd - 模块常用配置说明# 本文件的默认位置是/etc/rsyncd.conf# GLOBAL PARAMETERmotd file = /var/rsync/welcome.msgpid file = /var/run/rsyncd.pid# DEFAULT MODULE PARAMETERSuse chroot = nomax connections
rsync同步
qjwthink的博客
12-23 1057
目录 一、什么是rsync 二、配置rstnc源服务器 三、使用rsync备份工具 四、实际操作 一、什么是rsync 关于rsync，它是—款快速增量备份工具 Remote Sync，远程同步 支持本地复制，或者与其他SSH、rsync主机同步 官方网站: rsync 二、配置rstnc源服务器 rsync同步源指备份操作的远程服务器，也称为备份源 1、基本思路 建立rsyncd.conf配置文件、独立的账号文件 启用rsync的--daemon模式 2、应用示例 用户
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

FikL-09-19

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值