[linux]-ubuntu22.04使用parallel-rsync

爷来辣

于 2024-04-12 11:49:17 发布

阅读量298

点赞数 4

文章标签： linux 运维服务器

仅供学习参考转载请标明出处。个人笔记为自己记录如果对大家有帮助那也挺好写的马虎如果有不对的地方谢谢指正各位大佬别喷哦

本文链接：https://blog.csdn.net/xujiamin0022016/article/details/137675213

版权

导语：体验一下prsync工具(parallel-rsync)

apt update ;apt install pssh -y 
#apt update 
#apt install --reinstall pssh -d 
#cd /var/cache/apt/archives/
#dpkg-deb -X  pssh_2.3.4-2_all.deb  abc # 解压出deb中的可执行文件

parallel-rsync -l root -av -H "192.168.10.81 192.168.10.82"  /data1/yunwei  /tmp/

但是parallel-rsync没有–delete参数

优惠劵

爷来辣

关注关注

4
点赞
踩
10

收藏

觉得还不错? 一键收藏
打赏
0
评论
[linux]-ubuntu22.04使用parallel-rsync

导语：体验一下prsync工具(parallel-rsync)但是parallel-rsync没有–delete参数。
复制链接

扫一扫

eclipse-parallel-2023-09-R-linux-gtk-aarch64.tar.gz

09-22

eclipse-parallel-2023-09-R-linux-gtk-aarch64.tar.gz 适用于Linux Arm系统

parallel+rsync快速复制文件夹

隆力奇的博客

07-04

963

find . -type f | parallel 'mkdir -p /run/media/root/TOSHIBA\ EXT/backup1/{//}; rsync -a {} /run/media/root/TOSHIBA\ EXT/backup1/{}'

参与评论您还未登录，请先登录后发表或查看评论

rsync

z07121的博客

06-07

284

rsync简介 rsync是linux系统下的数据镜像备份工具。使用快速增量备份工具Remote Sync可以远程同步，支持本地复制，或者与其他SSH、rsync主机同步。 rsync特性 rsync支持很多特性： 1.可以镜像保存整个目录树和文件系统 2.可以很容易做到保持原来文件的权限、时间、软硬链接等等 3.无须特殊权限即可安装 4.快速：第一次同步时rsync会复制全部内容，但在下一次只传输修改过的文件。rsync在传输数据的过程中可以实行压缩及解压缩操作，因此可以使用更少的带宽 5.安全：可以使用

在LINUX系统上使用rsync命令

linuxunion的博客

08-02

1239

要监视 rsync 传输的进度并捕获任何错误或警告，可以使用 –log-file 选项创建自定义日志文件。这在解决问题或审核传输活动时特别有用。在此命令中，–log-file 选项用于指定将生成的日志文件的名称和位置。-a 或 –archive 选项用于在传输过程中保留文件权限、所有权和时间戳信息。-v 或 –verbose 选项在传输过程中提供更详细的输出。-z或–compress选项用于在传输过程中压缩数据，减少需要通过网络传输的数据量。

如何在 Linux 中使用 rsync 传输文件

CSDN云计算

08-03

3298

作者 | 刘光录来源 | TIAPrsync（远程同步，Remote Sync）是一种在系统中或两个系统之间复制文件和目录的同步工具。rsync 的一个最大的优点，就是它只复制更改的文件，因而可以减少 CPU 消耗，在复制文件时节省带宽和时间。rsync 相比于 scp 的优点我们大家可能知道 scp（secure copy 的简写），也是一个通过 ssh 在两个远程系统...

如何实现rsync多并发同步？

qq_24794401的博客

09-17

8021

前言工作中经常会遇到数据拷贝或者数据同步事情。一般情况会使用 rsync 来做数据拷贝或者数据同步等。问题rsync 不能做并发同步，特别是需要拷贝上T数据时，rsync 一个进程拷贝有...

eclipse-parallel-2023-09-R-linux-gtk-x86-64.tar.gz

最新发布

09-22

eclipse-parallel-2023-09-R-linux-gtk-x86_64.tar.gz 适用于Linux x86_64位系统

parallel-studio-a.lic

12-28

parallel_studio_a.lic,parallel_studio.lic,parallel_License.lic,

eclipse-parallel-2022-06-R-linux-gtk-aarch64.tar.gz

06-18

Eclipse IDE for Scientific Computing（eclipse-parallel-2022-06-R-linux-gtk-aarch64.tar.gz）适用于Linux aarch64： Tools for C, C++, Fortran, and UPC, including MPI, OpenMP, OpenACC, a parallel ...

jmeter-parallel-0.9.jar

04-24

拷贝jmeter-parallel-0.9.jar到Jmeter/lib/ext上。启动Jmeter。根据需要添加Parallel Controller： 1）在Jmeter的线程组下面的逻辑控制器，选择bzm并行控制器； 2）把浏览器或者wireShark观察到的同一批次的并发...

linux 并行计算命令,Linux下的并行神器——parallel

weixin_30478151的博客

04-30

2037

GNU Parallel是一个shell工具，为了在一台或多台计算机上并行的执行计算任务。本文简要介绍GNU Parallel的使用。1、parallel 用法简介Usage:parallel [options] [command [arguments]] < list_of_argumentsparallel [options] [command [arguments]] (::: arg...

linux parallel rsync 拷贝N多文件

weixin_30522183的博客

09-21

495

先来个对比图看一下, 左边图是普通 rsync 目录拷贝, 右边图是借助 parallel 工具并发起了多个 rsync centos6.5安装 parallel #!/bin/bash # Install parallel on CentOS 6. # Assumes you are root. Prefix w/ sudo if not. cd /etc/y...

parallel-fastq-dump是一个大坑

david10251025的博客

02-22

1179

用conda安装时它并没有注明是依赖于python3.6 但它会把anaconda默认python版本为3.6，无论是3.7还是2.7 且它不管以你是自己的环境还是公共的环境，都会升级你不得不重装anaconda 转载于:https://www.cnblogs.com/huangyinger/p/10417687.html...

使用 Parallel 提高 Linux 命令行执行效率

u014389734的博客

06-12

6237

你是否有过这种感觉，你的主机运行速度没有预期的那么快？我也曾经有过这种感觉，直到我发现了 GNU Parallel。GNU Parallel 是一个 shell 工具，可以并行执行任务。它可以解析多种输入，让你可以同时在多份数据上运行脚本或命令。你终于可以使用全部的 CPU 了！如果你用过 xargs，上手 Parallel 几乎没有难度。如果没有用过，这篇教程会告诉你如何使用，同时给出一些其它的...

并行rsync

Lywen2004200016的博客

11-16

317

#!/bin/bash if [ $# -le 2 ]; then echo -e "usage : \n\t$0 hostList src_file dst_path" echo -e "example: \n\t$0 hostList file.txt /home/work/opdir" exit 1 fi # concurrent ...

rsync的运用

weixin_44433165的博客

02-19

280

rsync学习与运用 rsync的简介 rsync是linux系统下的数据镜像备份工具。使用快速增量备份工具Remote Sync可以远程同步，支持本地复制，或者与其他SSH、rsync主机同 rsync的特性支持多种特性： 1.可以镜像保存整个目录树和文件系统 2.可以很容易做到保持原来文件的权限、时间、软硬链接等等 3.无须特殊权限即可安装 4.快速：第一次同步时rsync会复制全部内容，但...

rsync 常用选项

海绵汽水的博客

08-15

813

-v, --verbose 详细模式输出。 -q, --quiet 精简输出模式。 -c, --checksum 打开校验开关，强制对文件传输进行校验。 -a, --archive 归档模式，表示以递归方式传输文件，并保持所有文件属性，等于-rlptgoD。 -r, --recursive 对子目录以递归模式处理。 -R, --relative 使用相对路径信息。 -b,

linux命令parallel实现多进程并行计算

热门推荐

Aszxqw

11-09

2万+

需求分析：假设我们有三个进程A和B和C，分别对应三个运行脚本a.sh,b.sh,c.sh。 A和B两个进程是完全独立的。 C进行必须等待A进程和B进程都运行结束之后，才能启动C进程。我们现在需要写一个脚本要运行这三个程序脚本解决方法：串联【不理想】： a.sh; b.sh; c.sh; 但是如果这三个进程都要运行特别长

greenplum-db-6.24.0-ubuntu18.04-amd64.deb

07-16

### 回答1： greenplum-db-6.24.0-ubuntu18.04-amd64.deb是一个针对Ubuntu 18.04操作系统的Greenplum数据库软件包文件。Greenplum是一个强大的、兼容PostgreSQL的分布式数据库管理系统。 Greenplum数据库是为大规模数据处理和分析而设计的，它使用了多个节点（或服务器）以及并行计算的技术。这使得它能够处理大量的数据和复杂的查询，并提供高性能和可靠性。这个软件包是用于安装Greenplum数据库的工具。安装过程将会包括将软件文件拷贝到适当的目录、配置数据库的参数、创建数据库的用户和角色等步骤。通过安装Greenplum数据库，用户可以轻松地构建和管理一个分布式的数据仓库。它提供了许多功能，包括数据的导入和导出、数据的查询和分析、数据的备份和恢复等。此外，Greenplum支持并行化查询和负载均衡，使得用户可以实现高性能的数据处理。在安装完成之后，用户可以使用标准的PostgreSQL接口，如pgAdmin或psql等，来连接和管理Greenplum数据库。此外，还可以使用Greenplum提供的特定工具和扩展，以进一步优化和扩展数据库的功能。总之，greenplum-db-6.24.0-ubuntu18.04-amd64.deb是一个用于安装Greenplum数据库的软件包，它提供了一个强大、高性能和可扩展的分布式数据库解决方案，可以满足大规模数据处理和分析的需求。 ### 回答2： greenplum-db-6.24.0-ubuntu18.04-amd64.deb是一个基于Ubuntu 18.04操作系统和AMD64架构的Greenplum数据库包。 Greenplum是一种开源的关系型分布式数据库，它专为处理大规模数据分析和处理而设计。它采用了Massively Parallel Processing（MPP）架构，可以将数据分布在多个节点上进行并行处理，以提高查询和分析的速度。它支持SQL语言，并具有成熟的事务处理和并发控制功能。这个软件包是一个.deb格式的安装包，可安装在Ubuntu 18.04操作系统上的AMD64架构下。.deb是Debian软件包管理系统的标准包格式，它包含了安装一个软件包所需的所有文件和依赖项。要安装这个软件包，可以通过运行以下命令： ``` sudo dpkg -i greenplum-db-6.24.0-ubuntu18.04-amd64.deb ``` 安装完成后，可以使用相应的命令和配置文件来启动和管理Greenplum数据库。总而言之，greenplum-db-6.24.0-ubuntu18.04-amd64.deb是一个可用于在Ubuntu 18.04操作系统上安装Greenplum数据库的软件包，它提供了一个高性能的、分布式的关系型数据库解决方案。 ### 回答3： greenplum-db-6.24.0-ubuntu18.04-amd64.deb 是一个用于 Ubuntu 18.04 操作系统、针对 AMD 64 位架构的 Greenplum 数据库软件包。Greenplum 是一个高度可扩展的大数据平台，它基于 PostgreSQL 架构并加以优化，为企业提供了一种高性能、高可用性和高可扩展性的数据库解决方案。该软件包可以被安装在 Ubuntu 18.04 操作系统上，并且支持 64 位的 AMD 处理器。通过安装该软件包，用户可以获得完整的 Greenplum 数据库系统，包括 Greenplum 数据库服务器、管理工具和其他必需的组件。用户可以使用它来构建和管理大规模的数据分析和处理平台，进行数据存储、查询和分析等操作。Greenplum 数据库采用并行处理和分布式架构，可以处理大量的数据并实现并行计算，因此非常适用于大规模数据处理场景。安装这个软件包通常需要用户具备一定的 Linux 系统管理经验，用户需要通过终端和命令行来执行相关的安装和配置操作。在安装之前，用户应该先了解自己的操作系统版本，确认是运行在 Ubuntu 18.04 上，并且是否具备了 AMD 64 位架构的硬件支持。安装软件包之后，用户可以按照官方的安装指南和文档进一步配置 Greenplum 数据库系统，包括创建数据库、添加用户、设置权限等。用户可以通过各种工具和接口来访问和管理 Greenplum 数据库，例如命令行工具、Web 控制台和 JDBC/ODBC 驱动程序等。总而言之，greenplum-db-6.24.0-ubuntu18.04-amd64.deb 是用于 Ubuntu 18.04 操作系统和 AMD 64 位架构的 Greenplum 数据库软件包，它提供了一种高性能、高可用性和可扩展性的大数据解决方案，用户可以通过安装和配置来构建自己的数据分析和处理平台。

“相关推荐”对你有帮助么？

非常没帮助
没帮助
一般
有帮助
非常有帮助

提交