一、简介

Linux服务器普通的文件上传下载一般用 sz rz 就可以满足要求了，但是遇到大文件（超过4G）时就不好使了。

这是就可以通过将大文件分割为小文件传输，之后再进行文件合并即可。

二、用法

split命令格式：

split + 参数 + 要分割的文件 + 分割后子文件前缀

参数：

参数	解释
-a	后缀长度，例如-a3表示后缀长度为3
-l	按照行数将文件分割成多个小文件
-b	按照字节数将文件分割成多个小文件
-d	指定后缀编码为数字，默认编码为字母

2.1、生成测试大文件

[root@docker][19:13:12][OK] ~
#head -c 10M < /dev/urandom >cuttingLog
[root@docker][19:13:15][OK] ~
#ll -h
total 10M
-rw-r--r--  1 root root  10M Nov 18 19:13 cuttingLog

2.2、分割

【1】每100行分成一个文件，后缀为数字，后缀长度为3位，前缀为log.

split -a3 -l 100 -d cuttingLog log.

[root@docker][19:13:17][OK] ~
#split -a3 -l 100 -d cuttingLog log.
[root@docker][19:15:30][OK] ~
#ll
total 21328
-rw-------. 1 root root     1640 Nov  7 23:43 anaconda-ks.cfg
-rw-r--r--  1 root root 10485760 Nov 18 19:13 cuttingLog
-rw-r--r--  1 root root    23325 Nov 18 19:15 log.000
-rw-r--r--  1 root root    22546 Nov 18 19:15 log.001
-rw-r--r--  1 root root    22925 Nov 18 19:15 log.002
-rw-r--r--  1 root root    27279 Nov 18 19:15 log.003
-rw-r--r--  1 root root    29060 Nov 18 19:15 log.004
-rw-r--r--  1 root root    22118 Nov 18 19:15 log.005
-rw-r--r--  1 root root    25845 Nov 18 19:15 log.006
-rw-r--r--  1 root root    25865 Nov 18 19:15 log.007
-rw-r--r--  1 root root    25474 Nov 18 19:15 log.008
-rw-r--r--  1 root root    22842 Nov 18 19:15 log.009
-rw-r--r--  1 root root    26265 Nov 18 19:15 log.010
...

【2】每100行分成一个文件，后缀为字母，后缀长度为3位，前缀为log.

split -a3 -l 100 cuttingLog log.

[root@docker][19:16:58][OK] ~
#split -a3 -l 100 cuttingLog log.
[root@docker][19:17:01][OK] ~
#ll
total 21328
-rw-------. 1 root root     1640 Nov  7 23:43 anaconda-ks.cfg
-rw-r--r--  1 root root 10485760 Nov 18 19:13 cuttingLog
-rw-r--r--  1 root root    23325 Nov 18 19:17 log.aaa
-rw-r--r--  1 root root    22546 Nov 18 19:17 log.aab
-rw-r--r--  1 root root    22925 Nov 18 19:17 log.aac
-rw-r--r--  1 root root    27279 Nov 18 19:17 log.aad
-rw-r--r--  1 root root    29060 Nov 18 19:17 log.aae
-rw-r--r--  1 root root    22118 Nov 18 19:17 log.aaf
-rw-r--r--  1 root root    25845 Nov 18 19:17 log.aag
-rw-r--r--  1 root root    25865 Nov 18 19:17 log.aah
-rw-r--r--  1 root root    25474 Nov 18 19:17 log.aai
-rw-r--r--  1 root root    22842 Nov 18 19:17 log.aaj
...

【3】每2M分成一个文件，后缀为字数字，后缀长度为2位，前缀为log.

split -b 2M -d cuttingLog log.

[root@docker][19:20:26][OK] ~
#split -b 2M -d cuttingLog log.
[root@docker][19:20:29][OK] ~
#ll -h
total 21M
-rw-------. 1 root root 1.7K Nov  7 23:43 anaconda-ks.cfg
-rw-r--r--  1 root root  10M Nov 18 19:13 cuttingLog
-rw-r--r--  1 root root 2.0M Nov 18 19:20 log.00
-rw-r--r--  1 root root 2.0M Nov 18 19:20 log.01
-rw-r--r--  1 root root 2.0M Nov 18 19:20 log.02
-rw-r--r--  1 root root 2.0M Nov 18 19:20 log.03
-rw-r--r--  1 root root 2.0M Nov 18 19:20 log.04

注意：当分割后文件的数量大于后缀能表达的最大文件数时，会报错：split: output file suffixes exhausted
例如split -a1 -b 2048 -d /test/logs.txt /test/logs/log.这个命令能分割出14个文件，但是使用-a1命令使得后缀只能表示10个文件，所以实际文件数量超出后缀能表达的文件数量，会报错。

2.2、合并

[root@docker][19:27:03][OK] ~
#cat log.* >cuttingLog_bak
[root@docker][19:27:30][OK] ~
#ll -h
total 31M
-rw-------. 1 root root 1.7K Nov  7 23:43 anaconda-ks.cfg
-rw-r--r--  1 root root  10M Nov 18 19:13 cuttingLog
-rw-r--r--  1 root root  10M Nov 18 19:27 cuttingLog_bak
-rw-r--r--  1 root root 2.0M Nov 18 19:20 log.00
-rw-r--r--  1 root root 2.0M Nov 18 19:20 log.01
-rw-r--r--  1 root root 2.0M Nov 18 19:20 log.02
-rw-r--r--  1 root root 2.0M Nov 18 19:20 log.03
-rw-r--r--  1 root root 2.0M Nov 18 19:20 log.04
[root@docker][19:27:32][OK] ~
#md5sum cuttingLog*
a583e4c5c9de6618b89aa9fc909cc3c8  cuttingLog
a583e4c5c9de6618b89aa9fc909cc3c8  cuttingLog_bak

Linux：split 文件分割和合并相关推荐

Linux文件分割与合并：splitcat（转载）
转自:http://os.51cto.com/art/201104/255359.htm Linux下文件分割可以通过split命令来实现,而用cat进行文件合并.而分割可以指定按行数分割和安大小分割 ...
linux大文件分割 split命令
原文地址为: linux大文件分割 split命令 inux split 命令功能说明:切割文件. 语法:split [--help][--version][-<行数>][-b < ...
linux之文件分割split命令详解
linux之文件分割split命令详解进行文件分割时我们需要考虑几个问题: 如何分割?是按行分割还是按文件大小分割?是每100行分成一个文件还是每100K分成一个文件? 分割以后子文件名称是什么格式 ...
Linux split文件切分工具的使用
Linux split文件切分工具的使用目录 Linux split文件切分工具的使用 0x00.背景介绍 0x01.split介绍 0x02.实际例子解读 1.默认情况 2.根据文件字节大小拆分 ...
Linux正则表达式文件分割合并软连接
2021.09.27 1.在/etc 目录下,寻找以p开头,以wd结尾的文件.( $ find /etc -name p*wd ) 在/etc 目录下,寻找以p开头,中间有2个字符,3个英文字母,以e ...
使用python实现大文件分割与合并
在平常的生活中,我们会遇到下面这样的情况: 你下载了一个比较大型的游戏(假设有10G),现在想跟你的同学一起玩,你需要把这个游戏拷贝给他. 然后现在有一个问题是文件太大(我们不考虑你有移动硬盘什么的情 ...
c#文件分割与合并 part 1 (转自互联网)
这是一篇简单介绍了使用c#来进行文件的合并和分割,我在我的项目中,需要使用到这个模块的功能,所以自己实践之后,发于此,以作备份: 首先,我们先来做文件分割的部分,我们新建了个winform项目,项目设 ...
超级文件分割《合并》机（分割大文件）
需求:现在文件的大小越来越大,很多移动设备无法一次把文件一次全部拷贝完全,这种情况就需要把文件分割小点,分几次传送,然后,合并起来,这样就实现了大文件的拷贝功能介绍:我的这个用的是吧文件分割成1M大 ...
c语言文件分割与合并程序详解,如何实现将一个文件分割成多个小文件
你也许会遇到到这样一个问题?当你有一个较大的软件,而无法用一张软盘将其全部拷下时,你也许会想到该将它分解开,分盘拷回去后,再将它们合并起来.现在的这种分割工具很多,你想自己动手做一个适合自己的分割工具 ...

Linux：split 文件分割和合并