java读取一个大文件写到多个小文件

最近看Java面试中有问到关于利用java io流，读取一个大文件，然后输出到几个小文件的问题，这里自己写了个简单的sample

public static void main(String[] args) throws Exception {String inputFilePath = "D:/**/inputfile.csv";String outputFilePath = "D:/**/outputfile/";File file = new File(inputFilePath);// 1.算出Input文件的length(byte数)long inputFileSize = file.length();// 2.规定每个Output文件的lengthlong outputFileSize = 1024 * 2;// 3.算出有几个Output文件long fileCount = inputFileSize / outputFileSize;if (inputFileSize % outputFileSize != 0) {fileCount += 1;}FileInputStream fis = new FileInputStream(file);BufferedInputStream bis = new BufferedInputStream(fis);// 每次读取字节数byte[] bytes = new byte[1024];int n = -1;// 已经读取的字节数long readedBytes = 0;// 每次读入的字节数long perInputBypes = bytes.length;// 4.根据output文件个数进行输出for (int i=0; i < fileCount; i++) {System.out.println("**file**" + i);File outputFile = new File(outputFilePath + "ouput" + i + ".csv");BufferedOutputStream bos = new BufferedOutputStream(new FileOutputStream(outputFile));while ((n = fis.read(bytes, 0, bytes.length)) != -1) {bos.write(bytes, 0, n);readedBytes += n;// 从input文件中读取的n不到bytes.length的情况System.out.println("##n#" + n);System.out.println("##readedBytes#" + readedBytes);// 查看剩余没读的字节数是否小于每次读取的bytes数// 由于最后一次读取的字节数可能会小于bytes.length// 已读字节数 + 最后一次读取字节数 和outputFile大小做比较// 看是否可以需要再重新写一个文件if ((inputFileSize - readedBytes) < bytes.length) {perInputBypes = inputFileSize - readedBytes;System.out.println("##perInputBypes#" + perInputBypes);}// 下一次读取bytes前先预判是否超出输出文件bytes大小if (readedBytes + perInputBypes > (i + 1) * outputFileSize) {break;}}bos.flush();bos.close();}bis.close();}

java将一个大文件拆分成几个小文件输出相关推荐

python将大文件拆分成多个小文件，同时对各小文件处理以节省时间
# test.py import json import osroot_path = os.path.dirname(__file__)def f(x):return xtest_datas = [] ...
Java把一个大集合拆分成多个小集合，可以利用多线程提升并发处理效率
场景: 在开发中,如果一个集合中的数据量特别大,那么对这个集合进行循环处理业务可能就会比较耗时,为了提升效率,可以考虑把大集合拆分成多个小集合,然后用多线程对拆分后的多个小集合进行处理拆分: 1.拆 ...
Java如何把一个CSV文件拆分成指定个CSV文件【带源码，完美运行带截图】
文章目录一.前言二.实现 1. 首先进行CSV文件读取,并且把文件组成list,把list拆分 2. 拆分的具体代码如下: 3. 导出到新CSV文件代码如下: 4.测试 5. 结果一.前言前段 ...
java 文件分隔_java 实现大文件分隔成多个小文件
public class FileTest { /** * 文件分隔器:给定文件的路径和每一块要拆分的大小,就可以按要求拆分文件 * 如果指定的块给原文件都还要大,为了不动原文件,就生成另一个文件,以 ...
sqlserver将mdf文件拆分成多个ndf文件
sqlserver版本:2008R2 1.为什么要拆分数据库在运行一段时间后mdf文件会迅速增大,这会导致查询速度变慢.或者mdf文件的大小达到了操作系统允许的最大大小,这个时间就必须要进行拆分了. ...
如何将一个文件分割成多个小文件
你也许会遇到到这样一个问题?当你有一个较大的软件,而无法用一张软盘将其全部拷下时,你也许会想到该将它分解开,分盘拷回去后,再将它们合并起来.现在的这种分割工具很多,你想自己动手做一个适合自己的分割工 ...
c语言文件分割与合并程序详解,如何实现将一个文件分割成多个小文件
你也许会遇到到这样一个问题?当你有一个较大的软件,而无法用一张软盘将其全部拷下时,你也许会想到该将它分解开,分盘拷回去后,再将它们合并起来.现在的这种分割工具很多,你想自己动手做一个适合自己的分割工具 ...
批量将一个 PPT 幻灯片文件按固定页数拆分成多个幻灯片文件
概要:对于经常写 PPT 的人来说,经常会与 PPT 幻灯片打交道.如果一个 PPT 幻灯片文件有很多页数,那么有没有办法能够将他们拆分成多个 PPT 幻灯片文件呢?这样每一个独立的 PPT 文件的页 ...
批量将一个或多个 Word 文件按固定页数拆分成多个 Word 文件
概要:我们经常面对很多 Word 文档,有些 Word 文档有几百页,有时候我们希望将这些 Word 文档都按固定的页数拆分成多个 Word 文档.有没有一种简单的方法能够批量的将这些 Word 文件 ...

java将一个大文件拆分成几个小文件输出

java读取一个大文件写到多个小文件

java将一个大文件拆分成几个小文件输出相关推荐

最新文章

热门文章