tar多线程压缩解压

最新推荐文章于 2024-07-29 17:55:43 发布
最新推荐文章于 2024-07-29 17:55:43 发布
阅读量1.4k 收藏
点赞数
分类专栏： Linux 文章标签： linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zhaodiliu/article/details/124033540
版权
本文介绍了如何利用yum安装多线程工具pigz，并展示如何使用pigz与tar结合进行高效的数据压缩（-9代表最高压缩级别，-p指定CPU核心数）和解压。通过示例命令，展示了在/home/admin/abcd目录下压缩文件到abcd.tgz，以及如何解压cc.tar.gz和aa.tar.gz文件。
摘要由CSDN通过智能技术生成

1.安装多线程程序
yum -y install pigz

2.多线程压缩 tar -cvpf - $Dir | pigz -9 -p 6 $target-name

tar -cvpf - /home/admin/abcd | pigz -9 -p 6 abcd.tgz

pigz:
-9 : 代表压缩率
-p : 代表CPU数量

2.解压命令

tar --use-compress-program=pigz -cvpf cc.tar.gz

tar --use-compress-program=pigz -xvpf aa.tar.gz

zhaodiliu
关注
专栏目录
Linux 多线程压缩/解压缩
周迪新的博客
08-09 1万+
如果你是 Ubuntu 安装 pigz sudo apt-get update sudo apt-get install pigz 压缩：-p 后面跟的要分配的线程数，-9指定压缩级别（最高） tar -cf - /home/myfile | pigz -9 -p 12 > myfile.tgz 解压缩： pigz -p 12 -d myfile.tgz ...
linux tar多线程压缩解压
sumengnan的博客
05-28 7693
由于gzip工具是单线程工作的，无法发挥多核心cpu的优势，所以需要多线程压缩解压 1.安装pigz命令 yum-y install pigz 2.压缩操作 tar -cvpf - $Dir | pigz -9 -p 6 $target-name tar -cvpf - /home/admin/abcd | pigz -9 -p 6 abcd.tgz pigz: -9 : 代表压缩率 -p : 代表CPU数量 3、解压操作 tar --use-compress-program=pigz.
tar命令详解：解压与压缩的技巧
最新发布
技术研究中心
07-29 8513
命令是一个功能强大的工具，可以用于文件打包、压缩和解压。掌握其常用选项和技巧，可以有效地管理文件和目录，提高工作效率。它可以将多个文件和目录打包成一个文件，也可以对这些文件进行压缩，减少存储空间。大家好，我是微赚淘客系统3.0的小编，是个冬天不穿秋裤，天冷也要风度的程序猿！选项，这会将 tar 文件使用 gzip 压缩。如果要处理大文件，可以将 tar 文件分割成多个小文件。选项查看 tar 文件中的内容，而不解压。选项将文件追加到现有的 tar 文件中。要解压 gzip 压缩的 tar 文件，可以使用。
tar多线程压缩解压文件
热门推荐
时光不语的博客
11-26 1万+
tar多线程压缩解压 tar -czvf a.tar.gz ./* 测试每分钟压缩包a.tar.gz增长大约300M 安装多线程程序 yum -y install pigz 实测，4核的机器，2G文件用了不到1分钟 tar --use-compress-program=pigz -cvpf b.tar.gz ./* top看到系统CPU使用率是390%+ 解压测试：41G 的文件，4核的机器，内存16G tar --use-compress-program=pigz -xvpf hs_sale_1126.t
tar之多线程解压缩
tootsy_you的博客
05-23 5355
大家好，我是早九晚十二，目前是做运维相关的工作。写博客是为了积累，希望大家一起进步！ 我的主页：早九晚十二 文章目录关于tar多线程安装结果测试单线程压缩多线程压缩 关于tar 我们平常在服务器上操作时，经常会使用到tar命令，这是Unix和类Unix系统上的压缩打包工具，可以将多个文件合并为一个文件，打包后的文件后缀亦为“tar”。它可以在任何用户下使用。 同时，它有多个压缩率不同的版本，如tar.xz和tar.gz，前者的压缩率更高，但可能有兼容性问题。 如果大家使用过tar，一定都会有这个感受：当.
Linux服务器中tar多线程压缩/解压文件
BioinfoDu
12-14 1794
tar快速压缩文件
多线程压缩tar.xz
deserts Tsung
04-29 3537
compression - Create a tar.xz in one command - Stack Overflow
tar命令多线程压缩文件
BioinfoDu
12-14 1223
年末了，我在2021年购买的共享服务器到期了，今晚上在捣鼓下载服务器中的数据，大概有600-700G的样子。我开始打算全部直接下载。但是，速度真的很慢，下载速度只有100-200kb，实在是无奈！最终只能是的将文件进行压缩后下载。压缩的命令大部分会使用targzipgunzipbzip2bunzip2compressuncompresszipunzipr等进行压缩，或解压缩等。其中，targzipgunzip算是最常用的命令。若你感兴趣可以看教程生物信息学入门实践 | 二、linux命令。
tar多线程解压文件
05-22
tar多线程解压文件是指在解压tar文件时，使用多个线程来加速解压过程。 tar多线程解压文件的具体步骤如下： 1. 首先使用tar命令解压tar文件，将压缩包中的所有文件解压到指定的目录中。 2. 然后使用GNU parallel...
Linux(29) 多线程快速解压缩|删除|监视大型文件
我其实什么都不会
10-26 889
本文介绍一些关于大型文件的压缩|解压|删除|编译的问题
多线程的 压缩与解压
08-23
多线程的压缩与解压文件的源代码 通过VS2012编译而成
linux 多线程压缩,让gzip压缩速度加快的解决方案:使用支持多核CPU多线程并发压缩的pigz...
weixin_33462050的博客
05-06 1622
pig是个啥东东？官网：http://zlib.net/pigz一句话简介：复制代码代码如下:A parallel implementation of gzip for modernmulti-processor, multi-core machines。简单的说，就是支持并行的gzip。废话不多说，开始测试。pig默认用当前逻辑cpu个数来并发压缩，无法检测个数的话，则并发8个线程。一、测试压缩...
tar 使用多线程打包以及解压tgz
大魔导师的博客
09-02 4557
其实很简单，只需要一个参数就搞定了 tar打包tgz tar --use-compress-program=pigz -cvpf XXX.tgz XXX tar解压tgz tar --use-compress-program=pigz -xvpf XXX.tgz
linux系统中使用多线程压缩文件夹
weixin_44162814的博客
11-17 1129
多线程压缩很快.用来压缩origin_data,最后生成target_data.tar.gz。
java多线程解压,Java中的多线程解压缩
weixin_29806483的博客
02-16 232
So, I'm trying to do read-only access of a zip file in Java, decompressing in a multithreaded manner, because my standard simple singly-threaded solution of ZipFile/ZipEntry using the enumeration and ...
pigz搭配tar开启不了多线程，还是很慢
Jolen_xie的博客
11-11 366
pigz搭配tar开启不了多线程，还是很慢
tar命令批量解压方法
kwame211的博客
03-12 4853
第一种： for tar in *.tar.gz;do tar xvf $tar; done for tar in *.tar.bz2; do tar xvf $tar; done 第二种：用tar命令批量解压某个文件夹下所有的tar.gz文件 ls *.tar.gz | xargs -n1 tar xzvf 第三种： find -maxdepth 1 -name "*.bz2"|xargs ...
Linux tar压缩和解压
liushaoming
10-14 2715
范例一：将整个 /etc 目录下的文件全部打包成为 /tmp/etc.tar  [root@linux ~]# tar -cvf /tmp/etc.tar /etc [root@linux ~]# tar -zcvf /tmp/etc.tar.gz /etc [root@linux ~]# tar -jcvf /tmp/etc.tar.bz2 /etc
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值