使用EasyExcel实现excel导出，支持百万大数据量导出-----超简单

通过设置sheet数量，完成分批导出，每个sheet存100万数据，每次查询插入20万数据，避免超时，内存溢出等问题，可以根据服务器配置调整参数设置。
1.引入依赖

            <dependency><groupId>com.alibaba</groupId><artifactId>easyexcel</artifactId><version>3.0.5</version></dependency>

2.创建对应的实体类
@ExcelProperty设置的就是导出的列名，还可以设置排序等等

@Data
@NoArgsConstructor
@AllArgsConstructor
public class AltitudeMonExportExcelVO implements Serializable {@ExcelProperty(value = "站名")private String cname;@ExcelProperty(value = "站号")private String v01301;@ExcelProperty(value = "月平均气温(气温)")private String v12001_701="0";@ExcelProperty(value = "月平均气压")private String v10004_701="0";@ExcelProperty(value = "月平均相对湿度(相对湿度)")private String v13003_701="0";@ExcelProperty(value = "月平均温度露点差(露点温度)")private String v12301_701="0";
}

3.核心导出代码

public void exportSurfList2(StatisticsRequestVo requestVo,HttpServletResponse response) throws IOException {log.info("*********地面统计查询列表导出开始！**************");//文件名String fileName =String.valueOf(System.currentTimeMillis());OutputStream outputStream =null;try {//记录总数:实际中需要根据查询条件进行统计即可:一共多少条int totalCount=mapper.seleCount();//每一个Sheet存放100w条数据Integer sheetDataRows = ExcelConstants.PER_SHEET_ROW_COUNT;//每次写入的数据量20w,每页查询20WInteger writeDataRows = ExcelConstants.PER_WRITE_ROW_COUNT;//计算需要的Sheet数量Integer sheetNum = totalCount % sheetDataRows == 0 ? (totalCount / sheetDataRows) : (totalCount / sheetDataRows + 1);//计算一般情况下每一个Sheet需要写入的次数(一般情况不包含最后一个sheet,因为最后一个sheet不确定会写入多少条数据)Integer oneSheetWriteCount = sheetDataRows / writeDataRows;//计算最后一个sheet需要写入的次数Integer lastSheetWriteCount = totalCount % sheetDataRows == 0 ? oneSheetWriteCount : (totalCount % sheetDataRows % writeDataRows == 0 ? (totalCount / sheetDataRows / writeDataRows) : (totalCount / sheetDataRows / writeDataRows + 1));outputStream = response.getOutputStream();//必须放到循环外，否则会刷新流ExcelWriter excelWriter = EasyExcel.write(outputStream).build();//开始分批查询分次写入for (int i = 0; i < sheetNum; i++) {//创建SheetWriteSheet sheet = new WriteSheet();sheet.setSheetName("Sheet"+i);sheet.setSheetNo(i);//循环写入次数: j的自增条件是当不是最后一个Sheet的时候写入次数为正常的每个Sheet写入的次数,如果是最后一个就需要使用计算的次数lastSheetWriteCountfor (int j = 0; j < (i != sheetNum - 1 ? oneSheetWriteCount : lastSheetWriteCount); j++) {//分页查询一次20wPage page1 = new Page(j + 1 + oneSheetWriteCount * i, writeDataRows);//查询分页列表---按照自己的业务查列表，分页这个一定要使用这个：page1.getPageNum(),page1.getPageSize()！！！List<Map<String, Object>> list = mapper.selectList(page1.getPageNum(),page1.getPageSize());List<AltitudeMonExportExcelVO > SurfDayList = new ArrayList<>();//写入到excel:/**************z只需要选择一种方式即可*****************///这里可以通过设置includeColumnFiledNames、excludeColumnFiledNames导出什么字段，可以动态配置，前端传过来那些列，就导出那些列//方式1、只导出v01301这一列Set<String> includeColumnFiledNames = new HashSet<String>();includeColumnFiledNames.add("v01301");WriteSheet writeSheet = EasyExcel.writerSheet(i, "Sheet" + (i + 1)).head(AltitudeMonExportExcelVO.class).includeColumnFiledNames(includeColumnFiledNames).registerWriteHandler(new LongestMatchColumnWidthStyleStrategy()).build();//方式2、排除v01301这一列，其他的全部导出Set<String> excludeColumnFiledNames = new HashSet<String>();excludeColumnFiledNames.add("v01301");WriteSheet writeSheet = EasyExcel.writerSheet(i, "Sheet" + (i + 1)).head(AltitudeMonExportExcelVO.class).excludeColumnFiledNames(includeColumnFiledNames).registerWriteHandler(new LongestMatchColumnWidthStyleStrategy()).build();excelWriter.write(list, writeSheet);//方式3、不做设置，全部导出WriteSheet writeSheet = EasyExcel.writerSheet(i, "Sheet" + (i + 1)).head(AltitudeMonExportExcelVO.class).registerWriteHandler(new LongestMatchColumnWidthStyleStrategy()).build();excelWriter.write(list, writeSheet);}}// 下载EXCEL，返回给前段stream流response.setContentType("application/octet-stream");response.setCharacterEncoding("utf-8");response.setHeader("Content-disposition", "attachment;filename*=utf-8''" + fileName + ".xlsx");excelWriter.finish();outputStream.flush();outputStream.close();log.info("*********地面统计查询列表导出结束！**************");} catch (Exception e) {e.printStackTrace();}finally {if (outputStream != null) {outputStream.close();}}}

4.配置类

public class ExcelConstants {//一个sheet装100w数据public static final Integer PER_SHEET_ROW_COUNT = 1000000;//每次查询20w数据，每次写入20w数据public static final Integer PER_WRITE_ROW_COUNT = 200000;
}

至此就完成导出。

使用EasyExcel实现excel导出，支持百万大数据量导出-----超简单相关推荐

大数据导出excel大小限制_大数据量导出Excel的方案
测试共同条件: 数据总数为110011条,每条数据条数为19个字段. 电脑配置为:P4 2.67GHz,1G内存. 一.POI.JXL.FastExcel比较 POI.JXL.FastExcel均为j ...
大数据导出excel大小限制_EXCEL大数据量导出的解决方案
将web页面上显示的报表导出到excel文件里是一种很常见的需求.润乾报表的类excel模型,支持excel文件数据无失真的导入导出,使用起来非常的方便.然而,当数据量较大的情况下,excel本身的支 ...
Excel文件导出总结,包含大数据量的分批导出方式
文章目录需求背景参考内容导出方式代码实现 Excel4J 普通导出 POI原生方式普通导出大数据量分批导出依赖版本实现思路 POI工具类数据写入调用测试测试结果一个小意外 Ea ...
java百万级大数据量导出
java实现百万级大数据量导出实现方式一一,分析 excel导出如果数据量过大,会出现两个内存溢出的问题查绚数据量过大,导致内存溢出(可通过分批查绚解决) 下载的时候大EXCEL转换的输出流内存 ...
EasyExcel 分Sheet实现大数据量导出
EasyExcel 分 Sheet 实现大数据量导出 [场景]平台用户导出数据量达 w 级别的数据时界面白屏或按钮无响应. [解决方案]做异步导出,用户触发点击时创建导出消息并开启单独线程处理导出,处 ...
java大数据量导出csv文件并压缩
java大数据量导出csv文件并压缩 java使用POI大数据量导出excel一般会存在以下几个问题: 一次从数据库查询出这么大数据,查询缓慢查询数据量过大时会内存溢出解决方案:分页查询数据,比如 ...
Java 使用 POI 操作 Excel（反射，大数据量）
Apache POI 基本介绍 Apache POI 是 Apache 软件基金会提供的 100% 开源库.支持 Excel 库的所有基本功能. 图片来源:易百教程基本概念在 POI 中,Work ...
数据蒋堂 | 这个产品能支持多大数据量？
作者:蒋步星来源:数据蒋堂本文共500字,建议阅读5分钟.似乎是支持数据量越大,产品就越厉害. 经常有用户会问这个问题,你家的产品能处理多大数据量?似乎是这个值越大产品就越牛. 这个问题,其实没多 ...
使用bcp进行大数据量导出导入
SQL Server的导出导入方式有:在SQL Server中提供了导入导出的界面操作. --还没有解决的问题 --1:使用BCP命令时如果导出的字段为空想替换为其它描述(比如替换成NULL)如何办 ...

使用EasyExcel实现excel导出，支持百万大数据量导出-----超简单

使用EasyExcel实现excel导出，支持百万大数据量导出-----超简单相关推荐

最新文章

热门文章