tar分卷压缩/解压大文件

传输比较大文件时，或文件大小超出接收方能处理的上限时，一般会分卷压缩后进行传输。

$ tar -czf - data_dir/ | split -b 2G -d - mydata.tar.gz.

上面命令将data_dir目录打包后压缩，通过split分割成2GiB大小的多卷文件，-d参数设置分卷后缀为数字序号，最终输出的多卷压缩文件是 mydata.tar.gz.00, mydata.tar.gz.01, …

如果后缀序号参数改为 -b 则后缀序号为字母，输出的多卷压缩文件是 mydata.tar.gz.aa, mydata.tar.gz.ab, …

解压缩时则要先合并分卷，然后再解压：

$ cat mydata.tar.gz.* | tar -xz

tar的压缩过滤器是可选的，上面举的例子的过滤器是gzip，如果选bzip2，就把z参数改为j：

$ tar -cjf - data_dir/ | split -b 4G -d - mydata.tar.bz2.

这些命令也可以放入shell脚本中，借助shell脚本就可以实现自动处理。

tar分卷压缩/解压大文件相关推荐

tar多线程压缩解压文件
tar多线程压缩解压文件 tar -czvf a.tar.gz ./* 测试每分钟压缩包a.tar.gz增长大约300M 安装多线程程序 yum -y install pigz 实测,4核的机器,2G ...
Linux世界的三种压缩解压方式，zip/unzip方式压缩解压、tar方式压缩解压、jar方式压缩解压暨shopt extglob反选示例
Linux世界的三种压缩解压方式,zip/unzip方式压缩解压.tar方式压缩解压.jar方式压缩解压暨shopt extglob反选示例 zip/unzip方式.tar方式压缩解压是Linux中的 ...
android zip格式应用,Android 压缩解压zip文件
Android 压缩解压zip文件上次写了个解压缩功能,但有局限性,比如压缩文件xx.zip 里包括子目录的情况下,执行上次解压缩的功能就不能实现我们想要的效果,于是在网上参考了一下java的解压缩 ...
使用InfoZip压缩解压zip文件
使用InfoZip压缩解压zip文件源码下载地址:http://download.csdn.net/detail/risingsun001/4254821 先贴部分源码: void CInfozip ...
centos解压分卷rar_CentOS解压rar文件
默认不能解压rar文件. 进官网下载:http://www.rarsoft.com/download.htm 安装: # tar -zxvf rarlinux-x64-5.4.0.tar.gz # c ...
java 7zip解压_Apache Commons Compress介绍-JAVA压缩解压7z文件
7zip(下面简称7z)是由Igor Pavlov所开发的一种压缩格式,主要使用的压缩算法是LZMA/LZMA2.7z是一种压缩比非常高的格式,这与其压缩算法LZMA有直接关系,所以很多大文件都是用7 ...
linux打包tar包命令,Linux tar 命令压缩解压打包详解
Linux中压缩解压打包命令中用的最多的tar命令.tar命令是Unix/Linux系统中备份文件的可靠方法,几乎可以工作于任何环境中,它的使用权限是所有用户.在使用tar的参数需要区分大小写,参数写 ...
Linux下tar.xz压缩解压
解压 tar.xz tar -Jxvf xxx.tar.xz 压缩 tar.xz tar -Jcvf xxx.tar.xz /root/xxx 今天尝试编译内核,下载到了一份tar.xz结 ...
Linux gzip压缩/解压 *.gz文件详解
gzip 是linux中常见的压缩/解压工具,最常见的使用对象是*.gz格式的文件,这里简单介绍下它最常见的用法, GZIP(1) General Commands Manual GZIP(1) NA ...

tar分卷压缩/解压大文件

tar分卷压缩/解压大文件相关推荐

最新文章

热门文章