同一个文件夹两次zip压缩后的文件md5值不同

最新推荐文章于 2024-03-29 18:12:33 发布
最新推荐文章于 2024-03-29 18:12:33 发布
阅读量7k 收藏 2
点赞数 1
分类专栏： Windows 10 Linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/wamath/article/details/115921910
版权

同一个文件夹两次zip压缩后的文件md5值不同

最近在做将一个文件夹压缩成zip包的工作，使用的是windows下的7zip软件。对这个文件夹使用7z命令压缩三次，第一次生成的zip文件和后面两次生成的zip文件的md5值不同，二三两次生成的文件是相同的。然后将第一次和第二次生成的zip文件进行解压，编写Python脚本对比解压后的两个文件夹，发现两个文件夹的对应文件的md5都是一样的。因此可以得出结论，三次生成的zip文件都是没问题的。

针对该情况，在Google上进行了搜索，找到一篇文章——同一文件的两次 zip 内容不一致，该文作者遇到的问题是在MacOS上，对同一个文件使用zip命令压缩两次，但两次生成zip文件的md5值不同。该作者对此进行了深入分析，阅读了ZIP标准文档和Apple上的zip命令源码，并做了实验，得出的结论是zip命令会将文件的access time写入到zip文件中，因此两次生成的zip文件的md5值会不同。具体内容，可以点击链接查看。

根据上文作者的介绍，本文作者在Ubuntu系统上做了实验，第一次使用zip命令后，文件夹的access time确实发生了变化，第二次使用zip命令后没有了变化。以下是执行结果，第一次执行stat demo的Access为2021-04-21 00:55:57.432547254 +0800，执行zip命令后变为了2021-04-21 00:56:19.136547389 +0800，再执行zip命令后就不变了。使用md5sum命令计算两个文件的md5，两个zip文件是不同的。这验证了上文作者的结论。

ubuntu@VM-0-2-ubuntu:~/test1$ mkdir demo
ubuntu@VM-0-2-ubuntu:~/test1$ touch demo/a.txt
ubuntu@VM-0-2-ubuntu:~/test1$ stat demo
  File: demo
  Size: 4096      	Blocks: 8          IO Block: 4096   directory
Device: fc01h/64513d	Inode: 131341      Links: 2
Access: (0775/drwxrwxr-x)  Uid: (  500/  ubuntu)   Gid: (  500/  ubuntu)
Access: 2021-04-21 00:55:57.432547254 +0800
Modify: 2021-04-21 00:56:05.556547304 +0800
Change: 2021-04-21 00:56:05.556547304 +0800
 Birth: -
ubuntu@VM-0-2-ubuntu:~/test1$ zip -r a.zip demo/
  adding: demo/ (stored 0%)
  adding: demo/a.txt (stored 0%)
ubuntu@VM-0-2-ubuntu:~/test1$ stat demo/
  File: demo/
  Size: 4096      	Blocks: 8          IO Block: 4096   directory
Device: fc01h/64513d	Inode: 131341      Links: 2
Access: (0775/drwxrwxr-x)  Uid: (  500/  ubuntu)   Gid: (  500/  ubuntu)
Access: 2021-04-21 00:56:19.136547389 +0800
Modify: 2021-04-21 00:56:05.556547304 +0800
Change: 2021-04-21 00:56:05.556547304 +0800
 Birth: -
ubuntu@VM-0-2-ubuntu:~/test1$ zip -r b.zip demo
  adding: demo/ (stored 0%)
  adding: demo/a.txt (stored 0%)
ubuntu@VM-0-2-ubuntu:~/test1$ stat demo
  File: demo
  Size: 4096      	Blocks: 8          IO Block: 4096   directory
Device: fc01h/64513d	Inode: 131341      Links: 2
Access: (0775/drwxrwxr-x)  Uid: (  500/  ubuntu)   Gid: (  500/  ubuntu)
Access: 2021-04-21 00:56:19.136547389 +0800
Modify: 2021-04-21 00:56:05.556547304 +0800
Change: 2021-04-21 00:56:05.556547304 +0800
 Birth: -
ubuntu@VM-0-2-ubuntu:~/test1$ md5sum a.zip 
87c8192695a41a3513d83c3fbb3c7a5b  a.zip
ubuntu@VM-0-2-ubuntu:~/test1$ md5sum b.zip 
9274b506eb6c32c87492fd54ca5450cf  b.zip
wamth
关注
专栏目录
md5用途简介
lgfun的专栏
09-08 5104
1. 什么是md5? md5计算，是对原始消息做有损的压缩算法，无论消息（输入值）的长度是多少字节，都会生成一个固定长度（128位/16字节）的消息摘要（输出值） md5有以下特性： 不可逆（不能从消息摘要恢复出原始输入） 恒定性（同样的输入，经过md5算法经过同样的迭代次数，产生的输出一定是相同的） 不可预测（输入内容做轻微改变，输出大相径庭） 等等 2. md5有什么作用 数据完整性校验 文件完整性校验 文件经过网络传输、拷贝或其他操作后，可以通过文件的md5值判断文件内容是否发生了改变。文
PHP 压缩文件夹生成zip（解决中文文件名问题，可压缩带子文件夹的文件夹）
热门推荐
qq_29238009的博客
09-14 1万+
（前面我写个只压缩文件夹内文件，不带子文件夹的方法。后面我补充了个加强版，可以压缩文件夹里面的文件和子文件夹，可以耐心看下去） ↓↓↓这个链接是整理版↓↓↓，只贴出了最新改进后的方法和特点 http://blog.csdn.net/qq_29238009/article/details/79063894 这里下面的都是一些写的时候的思路，需要直接用的看↑这个链接，想知道每次修改的解题思路的看
Linux常见问题-zip命令打包相同文件但MD5值不一样解决方案
wangdsh的博客
01-03 1500
我们以分析问题->结局问题的思路来研究 zip命令打包相同文件但MD5值不一样的问题。
两个文件的MD5相同
11-22
这两个文件的MD5相同，但是SHA1和CRC32不同，通过比较二进制可以看出只有几个字节不同。
相同文件zip后md5不一样
最新发布
清白之年
03-29 377
new Date()就造成了为什么我们每次zip同样的文件后zip的md5都不一样。最近用JSZip打包项目中的碎文件，但是明明文件都没改动，但是每次打出来的zip的md5都不一样，后来查了资料后发现zip每个文件和文件夹都有一个创建时间。在fileAdd的时候，有设置ZipObject的options的date。大概意思就是要么用原来的或者用defaults里的，defaults里的date定义是这样的，在第6行。嗯，加了上面的代码就可以解决了相同文件打包出来的zip文件的md5是一样的。
相同目录zip后，md5值不一样的问题测试。
k569462166的博客
07-29 2561
记一下两个内容相同的目录，打包zip后md5不一致的问题和各种测试 ## mac系统 1.zip文件会在打包时，写入文件的access time，这个时间的变化导致zip后的文件内容不一致。 2. zip -X 忽略文件的时间戳，对单文件可用，对目录不可用，需要修改atime后再试 3. 修改atime后，打包完还是不一样。查了一遍，修改完之后，atime会悄悄的编程当前的时间的时间戳。结论：spotlight 服务访问了文件导致文件的atime又变了。 4. 可以在spotlight里设置忽略目
压缩文件后，每次的HASH值（MD5）都不相同的原因
sun0322
04-13 9514
■前言 使用工具生成的压缩文件，解压后 文件内容一样，但是压缩文件的HASH值不一样 ■原因 压缩文件，包含被压缩文件的时间信息 使用工具生成时， 每次文件都是新创建的， 尽管内容相同，可是时间不同。 ■扩展 tar cvf HASH（MD5）值相同 tar zcvf HASH（MD5）值不相同 ■打包 与 压缩打包 tar-zcvf 中间过程会生成xxx.tar （含有文件时间信息，即使内容一样，时间信息时不一样的） 再把 xxx.tar压缩成 xxx.tar.gz
【MD5加密结果不一致问题】同一个文本字符串，使用MD5加密之后，得出的加密结果居然不相同
✅ Java 开发工程师，从事 Web 应用程序的研发，擅长 Spring、SpringBoot 等技术。 ✅ 热爱编程，业余时间学习新知识，通过 CSDN 记录学习心得和笔记内容。
08-24 5634
今天工作中，遇到一个奇怪的问题，我负责对接第三方的短信发送接口，接口中有一个入参是sign加签字段，根据短信内容进行MD5加密 之后得到，于是我就是使用JDK自带的MD5加密算法，写了一个加密方法，代码如下：
7zip打包压缩（一个测试通过方案）
05-31
4. 文件完整性检查：使用MD5或SHA校验工具，对比压缩前后的文件哈希值，确保压缩过程未丢失任何数据。 5. 安全性测试：设置密码保护，测试加密强度，确保敏感信息不被泄露。 6. 性能测试：在大量文件或大文件上...
java 预览zip_java压缩包上传，解压，预览(利用editor.md和Jstree实现)和下载
weixin_29157533的博客
02-13 646
java压缩包上传，解压，预览(利用editor.md和Jstree实现)和下载实现功能：zip文件上传，后台自动解压，Jstree树目录(遍历文件)，editor.md预览采用Spring+SpringMVC+Maven+Jstree+editor.md实现，主要功能：zip压缩文件的上传后台自动解压Jstree自动获取最上层目录，每次仅仅会获取当前层的文件或者文件夹，然后点击文件夹或者文件，通...
同一个文件在windows和linux下计算md5哈希不一致的原因及解决方法
09-15
下面小编就为大家带来一篇同一个文件在windows和linux下计算md5哈希不一致的原因及解决方法。小编觉得挺不错的，现在就分享给大家，也给大家做个参考。一起跟随小编过来看看吧
文件下载-系统工具-wsjyeconsignjsdqqb_downyi.com.zip.zip
09-20
同时，看到两次.zip后缀，通常这意味着文件被压缩了两次，可能是为了额外的安全或压缩目的。然而，这样的双重压缩可能会导致解压过程更为复杂。 描述中的内容与标题相同，没有提供额外的信息，所以我们主要依据标题...
LINUX/UNIX 和WINDOWS计算的MD5值不一致
会会会会
09-13 890
描述： 同一个文件我转成字符串之后传的MD5函数中计算值校验数据，在本地windows上正常通过校验，在linux上校验未通过。 排查： 打印日志文件发现两个系统的MD5值不一致 原因：贴出转换代码 //读取js返回String public static String js2string(String path){ StringBuffer out = new StringBuffer(); try{ ...
同一个文件在windows和linux下计算md5为什么会不同
batwyj的专栏
11-21 1648
1. 行尾符的不同： Windows和Linux使用不同的行尾符。如果文件在不同系统下保存时行尾符不一致，会导致文件内容的实际不同，从而导致MD5值不同。为了确保一致的MD5值，可以尽量采用相同的操作系统、相同的文本编辑器，并注意文件的格式、编码和行尾符等差异。3. 字符编码： 如果文件采用不同的字符编码（如UTF-8、GBK等），也可能导致文件内容的差异，进而导致MD5值不同。5. 文件系统差异： 不同的文件系统可能在存储和处理文件时有一些微小的差异，这也可能导致MD5值不同。
用Python对相同文件获取MD5，但MD5不同的解决办法
MacwinWin的博客
02-26 1648
前段时间写了一个Python脚本，目的是定时从目标位置获取文件，上传到阿里云OSS，为了避免重复上传相同的文件，我在每次获取到文件后加了一个获取其MD5的步骤，并用这个MD5在OSS中查找，如果有则放弃上传，没有则用这个MD5作为文件名进行上传。逻辑很简单，但不曾想没几天OSS就涨到将近1T，这就很迷惑了，因为目标文件总共就几百G。所以真相只有一个！MD5查重失效了！！！ 看一下出错的代码： import hashlib import requests class Archive: def __in
tar打包的包md5值不一样
jesliwang的专栏
10-27 2989
经过实验发现，tar打包的文件中包含了打包的时间。所以md5值不一样 命令 date +%s ;tar -zcvf zz.1 zzz 结果 1319703081 zzz ---------------------- 命令 od -j4 -N4 -t dI zz.1 结果 0000004  1319703081 0000010 #希望看到的人能
md5实现校验两个文件的一致性
年华的博客
11-08 2295
本文主要介绍如何使用md5实现对两个文件一致性的校验，希望大家看完本文后能有所收获！MD5是一种哈希算法，可以将任意长度的数据转换为固定长度的哈希值，通常用于验证数据完整性，即通过比对两个数据的MD5值来判断它们是否相同。文件是计算机中的一种数据存储形式，可以保存数据或程序。文件也可以通过MD5算法计算出其哈希值， MD5是一种数字指纹，而文件则是一个具体的数据或程序，md5除了应用于文件内容校验，还包括密码加密等应用场景。
MD5加密结果不同
Aile
09-01 1583
md5加密，同样的代码得到不同的加密结果 MD5-tomcat部署在不同的操作系统导致加密结果不一致 同一字符串，MD5加密后出现不同的结果
qt使用zlib将一个文件夹压缩成.zip后 里面文件的.后缀都没了
05-26
在使用 zlib 库将一个文件夹压缩成 .zip 文件时，需要先将文件夹中的所有文件和目录一一遍历，并将它们添加到压缩文件中。这个过程中需要注意保留每个文件的后缀。 以下是一个示例代码，可以将一个文件夹压缩成 .zip 文件，并保留每个文件的后缀： ```cpp #include <QtCore> #include <zlib.h> void addFileToZip(zipFile zf, const QString& filePath, const QString& fileName) { QFile file(filePath); if (!file.open(QIODevice::ReadOnly)) { qWarning("Failed to open file %s", qPrintable(filePath)); return; } zip_fileinfo fileinfo; memset(&fileinfo, 0, sizeof(fileinfo)); QFileInfo fileInfo(file); QString fileNameInZip = fileName + "." + fileInfo.suffix(); QByteArray data = file.readAll(); zipOpenNewFileInZip(zf, qPrintable(fileNameInZip), &fileinfo, NULL, 0, NULL, 0, NULL, Z_DEFLATED, Z_DEFAULT_COMPRESSION); zipWriteInFileInZip(zf, data.data(), data.size()); zipCloseFileInZip(zf); } bool zipFolder(const QString& folderPath, const QString& zipFilePath) { QDir folder(folderPath); if (!folder.exists()) { qWarning("Folder %s does not exist", qPrintable(folderPath)); return false; } zipFile zf = zipOpen(qPrintable(zipFilePath), APPEND_STATUS_CREATE); if (zf == NULL) { qWarning("Failed to create zip file %s", qPrintable(zipFilePath)); return false; } QStringList files = folder.entryList(QDir::Files); foreach (QString file, files) { QString filePath = folder.absoluteFilePath(file); addFileToZip(zf, filePath, file); } QStringList dirs = folder.entryList(QDir::Dirs | QDir::NoDotAndDotDot); foreach (QString dir, dirs) { QString dirPath = folder.absoluteFilePath(dir); QDir subFolder(dirPath); QStringList subFiles = subFolder.entryList(QDir::Files | QDir::Dirs | QDir::NoDotAndDotDot); foreach (QString subFile, subFiles) { QString subFilePath = subFolder.absoluteFilePath(subFile); QString fileName = dir + "/" + subFile; addFileToZip(zf, subFilePath, fileName); } } zipClose(zf, NULL); return true; } ``` 在使用这个函数时，只需要调用 `zipFolder(folderPath, zipFilePath)` 函数，传入要压缩的文件夹路径和压缩后的 .zip 文件的路径即可。
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值