Java解析、生成Excel比较有名的框架有Apache poi、jxl。但他们都存在一个严重的问题就是非常的耗内存,poi有一套SAX模式的API可以一定程度的解决一些内存溢出的问题,但POI还是有一些缺陷,比如07版Excel解压缩以及解压后存储都是在内存中完成的,内存消耗依然很大。

easyexcel重写了poi对07版Excel的解析,能够原本一个3M的excel用POI sax依然需要100M左右内存降低到KB级别,并且再大的excel不会出现内存溢出,03版依赖POI的sax模式。在上层做了模型转换的封装,让使用者更加简单方便

ps: 其实本人并没有对比过POI,只是网络上资料都有这么一说,再对比了GitHub的star数,最后直接选用了EasyExcel

本文介绍一下,如何使用实体映射关系直接读取Excel数据

数据准备

假设需要读取的数据如下:

Excel数据

定义实体类

首先定义实体类User,需要继承BaseRowModel

@Data

public class User extends BaseRowModel {

@ExcelProperty(value = "姓名", index = 0)

private String name;

@ExcelProperty(value = "昵称", index = 1)

private String nickName;

@ExcelProperty(value = "密码", index = 2)

private String password;

//不支持LocalDate

@ExcelProperty(value = "生日", index = 3, format = "yyyy/MM/dd")

private Date birthday;

}

日期类型不支持LocalDate,只能是Date

数据读取监听类

继承AnalysisEventListener并要求泛型类是BaseRowModel的子类

@Slf4j

public class ExcelListener extends AnalysisEventListener {

private final List rows = new ArrayList<>();

@Override

public void invoke(T object, AnalysisContext context) {

rows.add(object);

}

@Override

public void doAfterAllAnalysed(AnalysisContext context) {

log.info("read {} rows %n", rows.size());

}

public List getRows() {

return rows;

}

}

实现的比较直接,就是全部读取到List后再处理

Excel读写工具类

实现Excel数据的读取和写入

@Slf4j

public final class ExcelUtil {

/**

* 从Excel中读取文件,读取的文件是一个DTO类,该类必须继承BaseRowModel

* 具体实例参考 : MemberMarketDto.java

* 参考:https://github.com/alibaba/easyexcel

* 字符流必须支持标记,FileInputStream 不支持标记,可以使用BufferedInputStream 代替

* BufferedInputStream bis = new BufferedInputStream(new FileInputStream(...));

*/

public static List readExcel(final InputStream inputStream, final Class extends BaseRowModel> clazz) {

if (null == inputStream) {

throw new NullPointerException("the inputStream is null!");

}

ExcelListener listener = new ExcelListener<>();

// 这里因为EasyExcel-1.1.1版本的bug,所以需要选用下面这个标记已经过期的版本

ExcelReader reader = new ExcelReader(inputStream, valueOf(inputStream), null, listener);

reader.read(new com.alibaba.excel.metadata.Sheet(1, 1, clazz));

return listener.getRows();

}

public static void writeExcel(final File file, List extends BaseRowModel> list) {

try (OutputStream out = new FileOutputStream(file)) {

ExcelWriter writer = new ExcelWriter(out, ExcelTypeEnum.XLSX);

//写第一个sheet, 有模型映射关系

Class extends BaseRowModel> t = list.get(0).getClass();

Sheet sheet = new Sheet(1, 0, t);

writer.write(list, sheet);

writer.finish();

} catch (IOException e) {

log.warn("fail to write to excel file: file[{}]", file.getName(), e);

}

}

/**

* 根据输入流,判断为xls还是xlsx,该方法原本存在于easyexcel 1.1.0 的ExcelTypeEnum中。

*/

public static ExcelTypeEnum valueOf(InputStream inputStream) {

try {

FileMagic fileMagic = FileMagic.valueOf(inputStream);

if (FileMagic.OLE2.equals(fileMagic)) {

return ExcelTypeEnum.XLS;

}

if (FileMagic.OOXML.equals(fileMagic)) {

return ExcelTypeEnum.XLSX;

}

throw new IllegalArgumentException("excelTypeEnum can not null");

} catch (IOException e) {

throw new RuntimeException(e);

}

}

}

实用类

public class EasyexcelApplication {

public static void main(String[] args) {

try (FileInputStream inputStream = new FileInputStream("user.xlsx")) {

List users = ExcelUtil.readExcel(new BufferedInputStream(inputStream), User.class);

System.out.println(users);

} catch (IOException e) {

e.printStackTrace();

}

}

}

注意事项

日期类型只支持Date,不支持LocalDate和LocalDateTime

常见错误

NotOfficeXmlFileException: No valid entries or contents found, this is not a valid OOXML (Office Open XML) file:这个是1.1.1的bug,在1.1.2-beta2中已经处理,暂时解决的办法就是使用过期的方法

new ExcelReader(inputStream, ExcelTypeEnum.XLSX, null, listener)

java.io.IOException: getFileMagic() only operates on streams which support mark(int):因为FileInputStream不支持标记,可以使用BufferedInputStream代替

BufferedInputStream bis = new BufferedInputStream(new FileInputStream(...));

参考

easyexcel导入时读不到数据_EasyExcel快速读写Excel数据相关推荐

  1. easyexcel导入时读不到数据_EasyExcel简单使用--导入excel数据

    读Excel 1.依赖包 com.alibaba easyexcel 2.0.5 2.代码import java.io.File; import com.alibaba.excel.EasyExcel ...

  2. easyexcel导入时读不到数据_SpringBoot中EasyExcel实现Excel文件的导入导出

    前言 在我们日常的开发过程中经常会使用Excel文件的形式来批量地上传下载系统数据,我们最常用的工具是Apache poi,但是如果数据到底上百万时,将会造成内存溢出的问题,那么我们怎么去实现百万数据 ...

  3. easyexcel导入时读不到数据_easyexcel读取任意表格以及使用中的坑

    关于easyexcel通过模板读取表格的,网上已经有好多了,而且源码里也有详细的demo,这里就不在多说.这里记录一下我的使用. 一: 目前有个接口是上传Excel并且返回第一行,之前用的是POI,但 ...

  4. easyexcel导入时读不到数据_java编程中通过easypoi导入excel文件并验证导入数据

    引言 现如今越来越多的web网站或者内部管理web系统都有自己的数据分析中心.其数据中心的数据有些来源于人工单独操作,某些来自人工搜集大量的信息后通过excel文件批量导入进系统.本博客将讲解在jav ...

  5. excel导入数据校验_使用Excel数据验证限制日期范围

    excel导入数据校验 Yesterday, one of my clients emailed to let me know that she was having trouble entering ...

  6. 如何快速把Excel数据导入SQL数据库

    如何快速把Excel数据导入SQL数据库 最近做测试数据的时候很苦恼,我百度了很久发现没有我想要的答案,不知道是我搜索的问题还是不行最终发现了一种方式可以快速导入数据不用一句一句的去写insert i ...

  7. python读写excel数据--pandas

    文章目录 1读写excel数据 1.1 读: 1.1 写: 2举例 2.1 要求 2.2 实现 1读写excel数据 利用pandas可以很方便的读写excel数据 1.1 读: data_in = ...

  8. R语言心得说:R语言之xlsx包读写Excel数据

    R语言心得说:R语言之xlsx包读写Excel数据 感谢Adrian A. Drǎgulescu发布的xlsx包 工具准备 [基础]简单读取excel文件数据 [基础]简单写入数据到excel文件 [ ...

  9. C/C++快速读写磁盘数据的方法-块读取/异步/优化分析算法/内存文件映射的原理和使用

    快速读写磁盘数据的方法: 1.块读取:一下子将数据读取到内存的(无论是文本还是二进制),而不是一行行的读取. 2.异步的IO,创建多线程,或者使用重叠IO,IO复用,异步的事件回调通知机制(可以用事件 ...

最新文章

  1. 写个Vue小组件,图片滚动
  2. 如何使用'git reset --hard HEAD'恢复到之前的提交? [重复]
  3. 笔记react router 4(三)
  4. 转发一个深度、实用的技术帖——实现ADM3251E与3.3V系统的RS-232接口隔离
  5. C/Cpp / 类中静态成员变量和普通成员变量的区别
  6. Silverlight初级教程系列
  7. 数据结构(复习)--------关于平衡二叉树(转载)
  8. Spring基于IOC容器基本原理
  9. 数据分析与挖掘建模实战001:导学,概述
  10. 个人量化策略整理_较好
  11. 闭包和高阶函数-函数式编程的基本特征
  12. python安装无法直接安装的包
  13. 使用 ssh-keygen访问服务器
  14. 处理 ps cs3 打开提示 产品已停止 故障
  15. zzuli1728(数学期望,组合数)
  16. css动态特效 @keyframes
  17. SEO面试题与面试攻略
  18. Pyside2安装与基础操作
  19. parseInt() 函数的奇怪行为
  20. C语言 给定一个字符串,统计‘a’的个数

热门文章

  1. 梅长苏:因为人的心,会变得越来越硬
  2. JavaScript学习笔记(BOM编程案例)
  3. SRM- Golink体验报告
  4. HTTP Referer 教程
  5. 高中数学基础-对数2.2.2对数函数图象及其性质(上)
  6. 域控制器是什么及其功能
  7. 你是谁的蘑菇,你的蘑菇又在哪?
  8. 《NEURAL READING COMPREHENSION AND BEYOND》解读(陈丹琦博士论文)
  9. 苹果序列号查询知识汇总
  10. 股票期权 【小白手册】(含大量图解)