GZIP结构图:

修复一个损坏的gzip文件的关键环节在于找到下一个正常压缩包的起始点。根据结构图中的信息可知,每个压缩包的开始结构中有是否到达尾部标志、使用的哈夫曼树类型、以及3个哈夫曼树的树元素个数等。如果某个gzip文件中间有一个坏扇区,要找到坏扇区后的一个正常起点,仅需按位右移,一直移位到可以正常解压的某个位,就可能找到了正确的压缩包起始。而根据gzip文件的压缩作业窗口为32KB大小推算,这个遍历不会超过64KB即可找到。在内存中快速循环可以很快找到,但需要有明确的判断错误的方法。

首先可以明确的是结尾标志,应该为0(我们是从损坏的点向后查)。而哈夫曼树类型也大致应该是动态哈夫曼(0x02),cl1的元素个数应该取值为257到286之间(包含边界),cl2的元素个数应小于等于30,ccl的元素个数取值可为1-15(包含边界)。

其实,还可以参考的东西有,解开的哈夫曼树是否异常,或者通过规律性原则找到最后一个取值为256的值,但这些算法应该是较为麻烦的,有上面的算法连续校验几个压缩块就足够了。

具体方法是对gzip的源码做修改,进行遍历。因时间关系,未做成通用工程,仅快速修改了部分代码。大致的修改点为:

找到损坏点:

在unzip.c中,

error("invalid compressed data--format violated");

这一行前,获取当前解码字节位置即可。

二、遍历找到损坏点:

 1、inflate.c文件中,改

if (nl > 286 || nd > 30)

#endif

return 1;

为:

if (nl > 286 || nd > 30||nl <257 || nd <1)

#endif

return 1;

2、inflate.c文件中,在int inflate_block(e)函数中

在如下代码前

bb = b;
bk = k;

加入代码:

if ((t != 2) || (*e != 0))
return 2;

3、inflate.c文件中,在int inflate_block(e)函数尾部

把if (t == 0) 与if (t == 1)的情况都直接返回错误值2

4、inflate.c文件中,函数int inflate()中,改

if ((r = inflate_block(&e)) != 0) 
return r;

end

为:

unsigned t;              /* block type */
register ulg b;           /* bit buffer */
register unsigned k;  /* number of bits in bit buffer */
while (inptr <= insize)
{
      unsigned int tptr = inptr; 
      unsigned int tbk = bk; 
      unsigned long tbb = bb; 
      unsigned int twp = wp; 
      long long tstart = *(long long*)(inbuf + tptr);
       if ((r = inflate_block(&e)) != 0)
       {
            inptr = tptr;
            bb = tbb;
               bk = tbk;
               wp = twp;
               b = bb;
               k = bk;
               NEEDBITS(1)
               DUMPBITS(1)
       }
       else
        {
             printf("get by www.datahf.net!"); //也可输出tstart,bb,bk 值,转载时请保留版权信息:www.datahf.net张宇
      }
}

此4步完成后,试着调试这个错误的.gz文件,当然,也可以在代码中解释完头部结构后加一个seek,直接seek到损坏位置。

通常情况下,输出printf(“get by www.datahf.net!”)这行代码时,已经找到了正确的起始位

找到起始位后,也可以构造或拷贝一个正常的gzip文件头,再拼接好找到的位流,即可解压了。(如果位流不是字节对齐的,可能要全部做位移)。拼接后很多压缩文件就可以打开甚至于解压了,不过,有可能会报错,主要是尾部的校验和大小错,其实可以忽略。

如果拼接好了linux下,不能直接用“gzip –d”解压,因其crc有错误,会导致解压到99%后报错,然后把文件删除,换成管道命令即可:

修复损坏的gz或tar.gz压缩文件之方法篇相关推荐

  1. java csv文件tozip后损坏_教你修复损坏的gz或tar.gz压缩文件

    原标题:教你修复损坏的gz或tar.gz压缩文件 接修复损坏的gzip压缩文件之原理篇,再次引用GZIP结构图: 在上一篇中已知,修复一个损坏的gzip文件的关键环节在于找到下一个正常压缩包的起始点. ...

  2. linux下gz和tar.gz、zip压缩解压

    文章目录 说明 分享 tar.gz 常用命令 gz 常用命令 zip 常用命令 总结 说明 本博客每周五更新一次. 日常数据处理中,经常需要压缩数据文件,减小传输带宽,方便分享和存储,整理gz.tar ...

  3. Linux下gz和tar.gz、与Windows天zip压缩解压

    tar.gz tar.gz是linux下常用文件或文件夹打包和压缩方式,它既支持打包,也支持压缩,linux下应用广泛. 常用命令: 打包文件,不压缩:tar -cvf 压缩文件名.tar 待压缩文件 ...

  4. 检查压缩包是否损坏_修复损坏的gzip压缩文件之原理篇

    接修复损坏的gzip压缩文件之原理篇,再次引用GZIP结构图: 已知修复一个损坏的gzip文件的关键环节在于找到下一个正常压缩包的起始点.根据结构图中的信息可知,每个压缩包的开始结构中有是否到达尾部标 ...

  5. .gz 与.tar.gz解压区别

    FileName.gz使用tar -xvf 无法正常解压,需要使用 gunzip FileName.gz FileName.tar.gz tar -zxvf FileName.tar.gz

  6. python3中实现tar_Python3实现将文件树中所有文件和子目录归档到tar压缩文件的方法...

    本文实例讲述了Python3实现将文件树中所有文件和子目录归档到tar压缩文件的方法.分享给大家供大家参考.具体实现方法如下: # 这里将一个文件树中的所有文件和子目录归档到一个tar归档文件,然后压 ...

  7. Java多word文件生成后进行压缩并导出下载后,压缩文件损坏并提示“不可预料的压缩文件末端”和“CRC校验失败”

    Java多word文件生成后进行压缩并导出下载后,压缩文件损坏并提示"不可预料的压缩文件末端"和"CRC校验失败" WinRAR 打开情况: 提示不可预料的压缩 ...

  8. tar 追加压缩文件

    tar 追加压缩文件 There is no nutrition in the blog content. After reading it, you will not only suffer fro ...

  9. mac 命令行 解压7z文件_如何在Mac上快速压缩和解压文件?Mac上解压和压缩文件的方法...

    苹果mac电脑怎么压缩和解压文件?Mac电脑仅默认支持把文件压缩成zip格式,解压成zip.tar.gz,bz2等格式,有些操作需要安装第三方软件来完成,这篇文章为大家带来几种关于在Mac上解压和压缩 ...

最新文章

  1. Win10 新版又悲剧了!老外神评论
  2. 如何保存PDF、Word和Excel文件到数据库中
  3. fpga驱动rgb液晶屏_正点原子开拓者FPGA开发板资料连载第五十四章基于的数字识别实验...
  4. UVA1603Square Destroyer破坏正方形
  5. cdr文件过大导出pdf打不开_PDF文件过大怎样压缩?这才是压缩PDF最简单的方法
  6. Oracle查询和解锁表
  7. mysql 日期和时间类型
  8. 罗斯蒙特电磁流量计8723说明书_罗斯蒙特电磁流量计8732E型的性能规格
  9. hdu Train Problem I 栈的基本应用
  10. 20.20 告警系统主脚本;20.21 告警系统配置文件;20.22 告警系统监控项目
  11. 应用程序框架实战四:你需要应用程序框架吗
  12. ORACLE 锁解释
  13. 利用CSS制作一个梦幻西游小动画
  14. 星际争霸II sc2 台湾版试玩
  15. win10使用administrator登录却仍然没权限
  16. cad打印本计算机未配置,为什么CAD点打印的时候就会警告提示无法使用此绘图仪配置?有什么解决办法?...
  17. android 课程大纲,Android课程大纲解读.doc
  18. python训练opencb分类器_垃圾邮件分类.ipynb
  19. 提高程序并发量的几个建议(不看保证后悔死你)
  20. (纯前台)读取、解析并展示xls/xlsx

热门文章

  1. MTK Android Driver:PMIC
  2. pandas数据排序sort_values后面inplace=True与inplace=False的实例驱动理解
  3. MySql新增、修改、删除表字段、字段数据类型、长度等(附带各种实际案例语句)
  4. AR502H-CN开发笔记18:快速建立开发环境
  5. 从伯努利分布到交叉熵(一)
  6. 9、XAML名称空间详解
  7. thinkphp5常用函数汇总_(thinkPHP)PHP常用函数大全
  8. HTTP--header
  9. Python——程序设计方法学
  10. WIN8软件测试,win8实测!!!测试常用软件。