一、问题的发现

最近在用分布式任务powerjob的时候,发现了一个关于数组分页之后的序列化问题。事情是这样的,在我执行MapReduce模式的时候,发现了在生成子任务时报了com.esotericsoftware.kryo.kryo5.KryoException: Class cannot be created (non-static member class): java.util.ArrayList$SubList Serialization trace: outPlaceIdList 错误,意思是我的入参里的outPlaceIdList对象不能被创建。

二、问题排查

仔细看了下日志发现,好像是因为序列化的问题:

百度之后果然也有类似的问题 https://blog.csdn.net/weixin_43060346/article/details/87104010

然后排查代码,发现我的入参是直接用的Lists.partition方法分页之后的子列表,估计是这个原因,就先直接new了一个list,重新启动之后发现问题解决了

三、分析源码

所以问题显而易见就是这个list分页之后的对象不能被序列化,至于powerjob的MapReduce源码这里并没有过多深究,着重看了下Lists.partition里边是如何进行生成的:

到这里发现最终是用的subList这个方法,进入到subList看到里边的get方法其实返回的

ArrayList.this.elementData(offset + index);

是elementData对象根据分页偏移量截取的对象,而当我看到elementData对象的修饰符时,问题就看出来了:

transient修饰符,说明这个elementData对象是不能被序列化的,由此,当直接用Lists.partition方法分页的对象去序列化的时候,就会报开头提到的错。

ArrayList分页Lists.partition遇到的坑相关推荐

  1. 列表等份切割,Google Utils Lists partition

    import com.google.common.collect.Lists;List<String> list = new ArrayList<String>(); for ...

  2. elementUI 分页组件的使用 - 踩坑篇

    elementUI 分页组件的使用.API调用.获取服务端数据.并初始化渲染页面:(踩坑一则) 因每个公司 / 每个项目 / 客户需求 / 都各有差异,所以本例只是demo说解,并非举一反三或万能分页 ...

  3. Lists.partition用法

    将list集合按指定长度进行切分,返回新的List<List<??>>集合,如下的: List<List<Integer>> lists=Lists.p ...

  4. Java之Lists.Partition项目中的使用

    开心一笑 [媳妇儿问我:"孩子都快出生了,你名字想好了没呀?" 我说:"都想好了,要是生个儿子名字就叫"好帅" 媳妇儿问:"为什么呀?&qu ...

  5. RowBounds分页原理、RowBounds的坑

    目录 背景说明 一:RowBounds分页原理 二:RowBounds的使用 三:RowBounds的坑 背景说明 项目中经常会使用分页查询,有次使用了RowBounds进行分页,因为很多场景或网上也 ...

  6. ElasticSearch分页查询的3个坑

    点击上方"Java基基",选择"设为星标" 做积极的人,而不是积极废人! 每天 14:00 更新文章,每天掉亿点点头发... 源码精品专栏 原创 | Java ...

  7. ArrayList转Json的2个坑

    库你急哇,哈集美马戏特~~ 1.使用类名作为参数时 public static List load(String fileName, Class entityClass) 要是直接将entityCla ...

  8. Java List 分割

    目录 1.使用 Java ArrayList subList() 方法 1.1. 将源 List 按照指定元素数量拆分为多个List 1.2. 方法介绍: 2.使用 谷歌  Lists.partiti ...

  9. SpringBoot中使用Mybatis-plus整合PageHelper分页插件踩坑

    今天使用SpringBoot中使用Mybatis-plus整PageHelper分页插件把我给坑惨了,我报错的pom.xml配置如下,其它的依赖就忽略掉了 <!--pagehelper --&g ...

最新文章

  1. 网站如何做到完全不需要 jQuery ?
  2. 贝壳集团IPO背后,风投协议之外还要面临何时盈利的问题
  3. nth-of-type
  4. comboBox绑定数据库后SelectedIndexChanged事件出错
  5. elasticsearch初次查询超时_ElasticSearch的工作流程
  6. linux 跳板机得搭建
  7. 配置JAVA_HOME环境变量
  8. 如何更换IP?最简单的换IP方法
  9. 亚太区最美面孔杨超越登榜,网友:不喜欢她
  10. 【FLY】Android(12)源码目录结构
  11. 王牌战争文明重启服务器维护中,王牌战争文明重启常见问题大全 游戏问题QA...
  12. 小饶学编程之JAVA SE第二部分——Web 前端基础:09CSS3
  13. 三国演义人物出场顺序统计(文本词频统计)
  14. HDFS的读写流程步骤(附图文解析)
  15. linux查看进程占用pcu,ksoftirq占用PCU较高,电脑使用较卡,该如何排查问题和解决?...
  16. 零知识证明学习资源汇总
  17. 如何解决 Windows 实例出现身份验证错误
  18. 计算机考研各科目分值分布,考研各个科目的分值
  19. Java学习苦旅(九)——原来顺序表可以这么简单呀
  20. 读书笔记之《安全边际(中文完整版)》

热门文章

  1. typora编辑器使用教程
  2. 高通QXDM抓log
  3. 长业务流程破解之道:美国生产力与质量中心流程分类架构概览
  4. Spark实时监控yarn指标:
  5. 计算机操作系统第一章课后答案
  6. Android IpReachabilityMonitor IP LOST_PROVISIONING
  7. Web jacker handbook学习笔记_chapter 1
  8. 手把手教你使用 Python 制作贪吃蛇游戏,才发现原来制作起来很简单ǃ
  9. Web API接口鉴权方式
  10. 带答案分享-算法面试中的趣味题目