一些压缩算法的分析比较

最近几年出现了几种新的压缩算法，主要有：

XZ（LZMA 的改进）：侧重最高的压缩率。
LZ4：侧重最高的解压缩速度，压缩率并非其首要目标。特别适合用于内存压缩。
LZO：侧重最高的压缩和解压缩速度，特别适合用于流压缩。
snappy：性能和 LZO 相近.
brotli：旨在取代 deflate（gzip），在压缩和解压缩速度比 deflate 稍好的情况下，提供比 deflate 高得多的压缩率。
ZSTD：不论是压缩率，压缩和解压缩速度均优于 ZLIB（zip）/deflate（gzip）/brotli

总结一下，日常存储文件时，如果压缩率最重要，选 LZMA。如果压缩速度也很重要，选 ZSTD。

pigz 命令采用 deflate 算法，默认采用当前 CPU 核心数相同的线程来压缩与解压
xz 命令采用 xz/lzma 算法，-T 0 选项将采用当前 CPU 核心数相同的线程来压缩与解压
zstd 命令采用 zstd 算法，-T 0 选项将采用当前 CPU 核心数相同的线程来压缩与解压

一些压缩算法的分析比较相关推荐

文件压缩算法详细分析（ZIP）及解压实例解释
原文地址:https://www.cnblogs.com/esingchan/p/3958962.html 最近自己实现了一个ZIP压缩数据的解压程序,觉得有必要把ZIP压缩格式进行一下详细总结,数据 ...
ZIP压缩算法详细分析及解压实例解释
最近自己实现了一个ZIP压缩数据的解压程序,觉得有必要把ZIP压缩格式进行一下详细总结,数据压缩是一门通信原理和计算机科学都会涉及到的学科,在通信原理中,一般称为信源编码,在计算机科学里,一般称为数据 ...
ZIP压缩算法详细分析及解压实例
最近自己实现了一个ZIP压缩数据的解压程序,觉得有必要把ZIP压缩格式进行一下详细总结,数据压缩是一门通信原理和计算机科学都会涉及到的学科,在通信原理中,一般称为信源编码,在计算机科学里,一般称为数据 ...
计算机基础（二）：压缩算法
压缩算法认识压缩算法我们想必都有过压缩和解压缩文件的经历,当文件太大时,我们会使用文件压缩来降低文件的占用空间.比如微信上传文件的限制是100 MB,我这里有个文件夹无法上传,但是我解压完成后的 ...
程序员需要了解的硬核知识之压缩算法
程序员需要了解的硬核知识之压缩算法文章目录程序员需要了解的硬核知识之压缩算法认识压缩算法文件存储压缩算法的定义几种常用压缩算法的理解 RLE 算法的机制 RLE 算法的缺点哈夫曼算法和莫 ...
基于Azure Blob冷存储的数据压缩备份总结
基于上一篇的压缩算法对比分析报告,选择了LZ4算法的普通模式,其测试压缩率为28%,20G压缩时间为256s,估计1T的冷备时间为3.5h. 接下来,将23T的HBase历史数据进行了压缩冷备,压缩后 ...
不相交集合求并的路径压缩
[0]README 0.1)本文总结于数据结构与算法分析, 源代码均为原创, 旨在实现对不相交集合的路径压缩操作: 0.2)对求并后的集合进行路径压缩,目的是降低集合(合并树)的深度,减少find ...
3 万字 51 张图教你 CPU、内存、操作系统硬核知识！
作者|cxuan 来源 |Java建设者(ID:javajianshe) 我们每个程序员或许都有一个梦,那就是成为大牛,我们或许都沉浸在各种框架中,以为框架就是一切,以为应用层才是最重要的,你错了.在 ...
计算机原理(CPU+存储+OS+指令)
计算机原理(计组+OS总结) https://mp.weixin.qq.com/s/ttncekujB82g88GRx3a6lQ 大佬写得太到位了,转载起来以后忘了的话再看看 CPU CPU 内部 ...

一些压缩算法的分析比较

一些压缩算法的分析比较相关推荐

最新文章

热门文章