用"tar" "split" "cat" 三个命令来分割，合并文件夹

最新推荐文章于 2024-08-01 21:07:10 发布
最新推荐文章于 2024-08-01 21:07:10 发布
阅读量2.1k 收藏 1
点赞数
分类专栏： 学习体会 文章标签： apache
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/superwlg/article/details/5520684
版权

当前32位apache支持的最大单个文件约为2G，这就要求超大文件要么用程序来实现下载，要么分割下载

 

假如现在有个名为wcms的文件夹，用

tar -zcvf * |split -b 1500m - wcms.tgz.bz.

命令可以将之压缩并打成多个每个大小不超过1500m的分包

 

用

cat wcms.tgz.bz.* | tar -zxv

则可以将多个分包合并后解压缩

 

具体三个命令的用法可以用man来查看

superwlg
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
大文件夹拆分
qq_28001535的博客
09-28 2106
将一个大文件夹内的图片拆分为多个子文件夹 最近在做一个文本识别的任务，但是由于下载的数据集较大，一个压缩包内有360万张图片，虚拟机ubuntu性能较差，无法解压。所以就在windows下将文件夹拆分成多个子文件夹。 首先生成多个子文件夹： import os for i in range(1,100): save_dir = "./chinese_ocr_datapart/train/%...
tar-split-cat 使用
Raywit的博客
01-26 664
tar-split-cat 使用一、tar（压缩解压）二、split（切片）三、cat（合并）        此笔记仅用于简易使用，具体用法参考 tar命令、split命令、cat命令。 一、tar（压缩解压） tar -zcvf demo.tar.gz demo—> 将demo文件压缩成demo.tar.gz tar -zxvf demo demo.tar.gz—> 将demo.tar.gz文件解压成demo 目标文件
【嵌入式开发 Linux 常用命令系列16 -- tar压缩文件分割】
CodingCos的博客
07-30 845
文件分割成多个较小的文件，并在需要时重新合并它们了。文件分割成多个较小的文件。文件分割成多个 100MB 的文件，这里使用。在 Linux 中，可以使用。要将分割的文件重新合并为一个。文件，如果你已经有一个。首先，我们创建一个示例。文件，可以跳过这一步。这样，你就可以将一个。
拆分文件夹
odelia的博客
05-22 4587
背景需要按照一定规则拆分大量文件夹 这些文件夹是按照命名分类的 这些文件夹的命名存在一定规律，比如：A_001_055,B_002_066,需要把这些文件夹拆分需求说明拆分需求说明1、待拆分文件夹： 规则一： 拆分后 直到分完为止； 规则二：若待分段文件夹为001-007，那么分段后的文件夹也就是001-007，若待分段文件夹为001-008，那么
linux tar.gz分包,tar 分包压缩与合并
weixin_36376879的博客
05-13 2084
要将目录logs打包压缩并分割成多个1M的文件，可以用下面的命令：tar cjf - logs/ |split -b 1m - logs.tar.bz2.完成后会产生下列文件：logs.tar.bz2.aa, logs.tar.bz2.ab, logs.tar.bz2.ac要解压的时候只要执行下面的命令就可以了：cat logs.tar.bz2.a* | tar xj再举例：要将文件test.pd...
分割文件夹下所有图片
10-19
在GUI中首先选择文件夹，然后对文件夹下的所有图片进行分割操作并保存，解决数据量不足的情况。
Linux zip与tar分卷压缩及合并解压
破茧的日子的博客
12-04 6402
1.zip 分卷压缩与合并解压 1. 分卷压缩 # 将文件或文件夹打包为zip压缩包，imgs可以为文件夹也可以为文件 zip -r imgs.zip ./imgs # 压缩后imgs.zip为2.3G，将其分割，每个子压缩包不超过1G，生成三个压缩包subimgs.z01（1G）、subimgs.z02（1G）和subimgs.zip（0.3G） zip -s 1024m imgs.zip --out subimgs.zip 2. 合并解压 # 将上述三个压缩包合并为一个压缩文件single.z
linux必学的60个命令
m0_67394230的博客
03-08 6240
Linux提供了大量的命令，利用它可以有效地完成大量的工 作，如磁盘操作、文件存取、目录操作、进程管理、文件权限设定等。所以，在Linux系统上工作离不开使用系统提供的命令。要想真正理解Linux系统， 就必须从Linux命令学起，通过基础的命令学习可以进一步理解Linux系统。 不同Linux发行版的命令数量不一样，但Linux发行版本最少的命令也有200多个。这里笔者把比较重要和使用频率最多的命令，按照它们在系统中的作用分成下面六个部分一一介绍。 ◆ 安装和登录命令：login、shutdown、hal
【Linux命令】--- Linux下的分卷压缩与解压
秋知叶i
05-28 1968
在编程的艺术世界里，代码和灵感需要寻找到最佳的交融点，才能打造出令人为之惊叹的作品。而在这座秋知叶i博客的殿堂里，我们将共同追寻这种完美结合，为未来的世界留下属于我们的独特印记。
linux命令之文本操作命令和文件压缩与打包命令
微笑的码农的博客
11-05 759
文章目录1 文本操作命令1.1 cat ***1.2 head **1.3 tail ***1.4 管道| ***1.5 xargs **1.6 数据重定向 ***1.7 cut1.8 sort1.9 sed !!1.10 awk1.12 wc1.13 vi /vim 编辑器的使用 ***2 文件压缩与打包****2.1常见文件扩展名：2.2 tar 命令，选项与参数：2.3 tar常用的指令组合 *** 1 文本操作命令 1.1 cat *** 直接查看一个文件的内容可以使用cat,tac,nl这几
【YOLOv8十万长文优化】独家魔改优化技巧+附20余个源码手把手教程
最新发布
cv君的博客
08-01 2万+
【YOLOv8十万长文全解】v8 v9通用。独家魔改优化技巧+附20余个源码手把手教程; Hello，大家好，我是cv君，最近开始在空闲之余，经常更新文章啦！除目标检测、分类、分隔、姿态估计等任务外，还会涵盖图像增强领域，如超分辨率、画质增强、降噪、夜视增强、去雾去雨、ISP、海思高通成像ISP等、AI-ISP、还会有多模态、文本nlp领域、视觉语言大模型、lora、chatgpt等理论与实践文章更新，更新将变成一周2-3更，一个月争取10篇，重回创作巅峰
tar-gz解压合并
02-15
tar-gz解压合并
linux打包多个tar包，解压时自动合并
Aesop的博客
05-19 625
您现在将得到多个 your_archive.tar.gz.001、your_archive.tar.gz.002、your_archive.tar.gz.003 等文件，每个文件大小为100MB。这将合并并解压 your_archive.tar.gz.001、your_archive.tar.gz.002、your_archive.tar.gz.003 等文件，并将它们解压到当前目录。将一个目录压缩成多个 tar.gz 包，并在解压时自动合并它们到一个目录。将目录压缩并将输出发送到标准输出。
linux cat打包多个文件怎么提取,使用tar和split打包分割文件
weixin_26798991的博客
05-07 666
http://www.cnblogs.com/xiaouisme/archive/2011/05/25/2057435.htmltar是文件打包工具，split是文件分割工具，在邮件中发送附件的时候，可能因为附件大小限制，需要压缩并分割，分几封邮件发送。如果需要备份很多资料的时候，打包后的单个文件可能超出文件系统支持的单个文件大小限制的时候，也需要分割成适合大小的文件包。刚好今天又要备份skype...
Linux文件分割与合并：split & cat命令
Ricky
05-03 6146
有一个文件太大处理起来不方便，那有没有比较简单的Linux命令来按行数或者按大小进行切分？答案是YES，Linux下文件分割可以通过split命令来实现，可以指定按行数分割和按大小分割两种模式。由于这个命令之前没有用过，所以在这里记录一下。Linux下用split进行文件分割1、指定分割后文件行数对于txt文本文件，可以通过指定分割后文件的行数来进行文件分割。命令：split -l linenum
【Linux | tar分包与合并】
pingyufeng的博客
02-16 2023
Linux |tar分包与合并
Linux篇---压缩文件tar.gz的压缩、解压、分割、合并
心惠天意
11-14 4805
压缩文件tar.gz的压缩、解压、分割、合并
【Linux命令】mac/linux使用split和cat命令拆分合并tar.gz文件
小明2766的博客
05-08 3111
mac/linux使用split和cat命令拆分合并tar.gz文件 问题描述：因为大文件上传到云服务器很花费时间，而且还可能传输失败，我们可以用分割文件的方法，对一个个小文件进行上传，再在linux服务器下合并起来。 假设我有一个tar.gz文件，它的大小为242mb。我想要分割为2个文件，每个150M（或以下）。 分割 split -b 150m -d -a 2 raw_sample.csv.tar.gz """ -b 150m：表示设置每个分割包的大小，单位还是可以k -d ：参数指定生成的分割包
Linux 文件切割split与合并
nowhy25的博客
05-14 514
生产环境中，一些文件比较大，动则几个G，有的安装包和镜像可达到十几G，但是有些平台显示传输文件大小，所以一些比较大的文件会被切割上传再合并。 这里介绍了个比较常用简单的切割方式split [root@test test]# ls -lh 总用量 2.5G -rw-r–r-- 1 root root 2.5G 5月 14 22:40 tmp.tar #把2.5G的tmp文件切割成500M的文件 [root@test test]# split -b 500M tmp.tar test #默认切割后命名为aa、
tar命令打包4个文件夹
12-08
以下是使用tar命令打包4个文件夹的方法： ```shell tar -zcvf myarchive.tar.gz folder1 folder2 folder3 folder4 ``` 其中，myarchive.tar.gz是打包后的文件名，folder1、folder2、folder3和folder4是需要打包的...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值