rsync 断点续传传文件到其它机器

最新推荐文章于 2023-06-06 10:24:16 发布

weixin_34194317

最新推荐文章于 2023-06-06 10:24:16 发布

阅读量223

点赞数

文章标签： python 运维 5g

原文链接：https://my.oschina.net/POintMELOve/blog/284837

版权

2019独角兽企业重金招聘Python工程师标准>>>

服务器A上有一个5G的文件temp.zip要拷贝到服务器B上。

登陆A后，因文件大很耗时，为了挂在后台持续运行，要使用screen命令（此处省略）。

开始传文件：

rsync -hP -e ssh temp.zip admin@B:~/
# 输入密码

不加--inplace时，会临时生成类似 ".temp.zip.3N3jxB"的文件，在完成或中途主动中断时，才会生成"temp.zip"。

意外中断时是不会生成"temp.zip"文件的。这种情况下再次执行上面命令会从头开始传，以前传的就白费了。比如下面：

加 --inplace后：

rsync -hP --inplace -e ssh temp.zip admin@B:~/
# 输入密码

会直接生成"temp.zip"文件。意外中断后再次执行命令就会续传了。

转载于:https://my.oschina.net/POintMELOve/blog/284837

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

weixin_34194317

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

后台运行rsync命令的解决方案

weixin_43178406的博客

09-28

5万+

本文主要介绍了后台运行rsync命令的解决方案，希望能对使用Linux的同学们有所帮助。文章目录 1. 问题描述 2. 解决方案

rsync 操作及部署

xiaxia2022的博客

09-10

528

一。服务器端 1.yum -y install rsync xinetd 2.vi /etc/xinetd.d/rsync 将yes 修改为no IPV6修改为IPV4 3.vi /etc/rsyncd.conf 新建文件 uid = root gid = root use chroot = no max connections = 400 strict modes = yes port = 873 commet = This is MySQL Backup Data ignore errors re

参与评论您还未登录，请先登录后发表或查看评论

【利器】使用rsync进行主机间数据同步

jiange_zh的博客

11-06

3870

前言首先，还是先提一下我使用数据同步的一个背景：公司的电脑是windows 7系统，一般程序开发在本地机器进行，代码开发完之后，需要同步到远程linux编译机上编译。之前使用eclipse时的同步方案：通过samba将linux主机的项目目录映射到windows主机的一个系统盘J上，然后通过一个eclipse的数据同步插件将本地项目目录同步到系统盘J上。后面通过Babun（《在Wi

rsync借助ssh通道在不同主机之间传输数据

yuki5233的博客

10-26

2901

目录文章目录目录一、rsync借助ssh通道在不同主机之间传输数据模式1.1 概述1.2 机器准备1.2.1 本地主机1.2.2 远程主机1.3 rsync借助ssh通道在不同主机之间传输数据模式的语法1.3.1 将本地主机上的数据推送到远端主机指定目录1.3.2 将远端主机指定目录的数据拉取到本地主机上的指定目录一、rsync借助ssh通道在不同主机之间传输数据模式 1.1 概述 rsync借助ssh通道在不同主机之间传输数据模式，此时类似于scp命令的功能。 1.2 机器准备 1.2.1 本地主机

linux 服务器使用rsync进行大量的（800G）数据迁移/同步,支持断点续传

最新发布

wait973的博客

06-06

1180

执行可以看到 temp 目录有个进程了，【如果同步失败不能继续执行的需要删掉这个进程】执行脚本后，要求输入同步到另外一台服务器的密码,输入完成回车即可。保存为 rsync文件后，使用。如果成功执行，同步日志会记录到。

rsync中断续传文件

zengshaotao的专栏

04-18

2590

scp 是通过ssh协议传输数据，如果是想传输一个很大的数据，这几天我就遇到过，一个tar包，400G左右，通过scp拷贝时，有可能遇到服务器断电什么的悲剧问题，那么类似scp拷贝的另一个命令 rsync就可以实现意外中断后，下次继续传，命令如下： rsync -P --rsh=ssh home.tar 192.168.205.34:/home/home.tar -P: 是包含了 “–par...

转：rsync的断点续传设置。

有意没思的专栏

05-23

9647

关于rsync的断点续传关于rsync的断点续传 经常copy大文件，由于服务器、路由等网络的不确定性，老是出现 remote server not responding. 于是查了下资料，发现rsync这个工具支持断点续传功能，这里介绍一下。 rsync也分服务器端和客户端，使用man查看帮助信息，我们发现rsync有六种不同的工作模式： Local: rsync [OPTION...] SRC... [DEST] <br

rsync linux 本地文件移动 断点续传

skate6的专栏

04-13

3374

近期需要将300G的日志文件从一个根目录移到另一个挂载根目录上，选择使用rsync，先拷贝后删除。刀片机，但是拷贝速度并不理想，大概1G/2分钟。因为是小文件，没有使用断点续传，因为是本机，限速50M/s。但是领导提到了断点续传，觉得有必要看下，因为总会有用到的时候。 1.非断点续传命令 rsync -avz --progress --bwlimit=50000 /var/app

Rsync扩展——Rsync断点续传与Rsync限速

weixin_43991978的博客

03-16

3090

Rsync断点续传 Rsync支持大文件断点续传，参数如下 –partial 默认情况rsync传输中断后，将会删除所有部分传输的文件，某些情况下用户希望能保留已经传输的内容，该参数告知rsync保留部分已传输的文件，可以使得剩余文件部分传输 –partial-dir=DIR 保留部分传输文件，这是个更好的参数，能够指定目录保存部分数据，而不是写入目标文件下次传输的时候，rsync将使用该目录的数据，来恢复整体数据传输，结束后删除该目录【断点续传案例】加上断点续传指定目录参数，传输中断，部分数据也保存

linux机器上使用shell脚本并行拷贝文件或文件夹到多台其他linux服务器上

05-10

可以使用`rsync`命令和`ssh`命令来实现在多台 Linux ...同时，如果文件或文件夹较大，可能需要增加 `rsync` 命令的额外选项来加速拷贝，例如使用 `--progress` 显示进度信息，或使用 `--partial` 支持断点续传等。

cwrsync文件同步案例说明

03-06

windows平台不同服务器的文件同步，用来解决不同服务器文件同步需求

rsync环境搭建.docx

08-02

- `-P`: 断点续传，默认情况下会删除已中断的部分并重新传输。 - **从远程主机拉取** - 从`192.168.1.32`机器的`/tmp/aa`目录拉取数据到本地`/tmp`目录： ```bash rsync -tr --delete root@192.168.1.32:/tmp/...

利用rsync进行文件同步与备份的最佳实践

# 1. 简介 ## 1.1 什么是rsync rsync是一个开源的、快速、灵活...- *灵活性*：rsync可以在本地或远程机器之间同步文件，且支持多种操作系统，如Linux、Mac、Windows等。 - *安全性*：rsync支持通过SSH协议进行传输，

linux rsync 源文件,linux – rsync挂在一个大文件上

weixin_36469247的博客

05-09

每天晚上我都会使用rsync将几个虚拟磁盘从一台Linux Debian计算机复制到另一台Linux Debian.大多数文件都是带有“漏洞”的原始图像：某些部分从未写入,因此保留在磁盘上未分配.rsync挂在一个文件上,总是一样的.传输50 Gb后,每次都会发生挂起.我不确定这是否总是在完全相同的点,但是ls -sh显示50 Gb.这是一个包含151 Gb的800 Gb文件(所以649 Gb是未...

rsync介绍与配置（rsync+inotify实时同步）

芦苇的博客

07-15

528

内容概要一、rsync介绍二、rsync同步源三、配置rsync源1、基本思路2、rsync命令3、配置源的两种表达方式四、配置rsync下行同步（1）关防火墙、安装相应的软件（2）建立/etc/rsyncd.conf 配置文件（3）为备份账户创建数据文件（4）保证所有用户对源目录/var/www/html（需要备份的文件目录）都有读取权限（5）启动 rsync 服务程序（6）验证五、inotify简介1、调整inotify内核参数（优化）2、使用inotify-tools辅助工具3、编写同步脚本六、rsy

rsync断点续传

BIT工匠

03-13

639

rsync的断点续传命令： [root@testmachine test]#rsync -avzp -e'ssh -p 4321' file.tar.gz root@192.168.1.3:/home root@192.168.1.3's password: sending incremental file list

需要将一个11GB的文件传输到另外一台服务器，如何断点续传？如何限制带宽？

switchcore的专栏

01-14

3086

http://www.redicecn.com/html/Linux/20130703/460.html 需要将一个11GB的文件传输到另外一台服务器，如何断点续传？如何限制带宽？使用rsync，完整命令如下： rsync -av --bwlimit=1000 --progress --inplace --rsh='ssh -p 22000' menus_

rsync网络不稳定情况下的大文件传输

Dexter_Wang的博客

06-19

8966

rsync网络不稳定情况下的大文件传输由于本人供职的公司提供单机游戏的下载，而单机游戏一般都较大，我们使用了rsync把本地服务器（本地仓库）同步到外国服务器（国外仓库）最后再同步到国外的web前端服务器。然后总是有某些原因导致外国的有些服务器网络不稳定，再加上同步的文件都较大（30多G的也经常有）。当我们使用rsync -avzP这个命令也会有卡死的时候，那么不妨使用下面的三个参

linux服务器增量,Linux下rsync使用实例：增量同步|单向覆盖|仅更新

weixin_35650041的博客

04-28

290

--inplaceThis option changes how rsync transfers a file when the file's data needs to be updated: instead of the default method of creating a new copy of the file and moving it into place when it is c...