ArrayList分页Lists.partition遇到的坑

一、问题的发现

        最近在用分布式任务powerjob的时候,发现了一个关于数组分页之后的序列化问题。事情是这样的,在我执行MapReduce模式的时候,发现了在生成子任务时报了com.esotericsoftware.kryo.kryo5.KryoException: Class cannot be created (non-static member class): java.util.ArrayList$SubList Serialization trace: outPlaceIdList 错误,意思是我的入参里的outPlaceIdList对象不能被创建。

二、问题排查

仔细看了下日志发现,好像是因为序列化的问题:

百度之后果然也有类似的问题 https://blog.csdn.net/weixin_43060346/article/details/87104010

然后排查代码,发现我的入参是直接用的Lists.partition方法分页之后的子列表,估计是这个原因,就先直接new了一个list,重新启动之后发现问题解决了

三、分析源码

所以问题显而易见就是这个list分页之后的对象不能被序列化,至于powerjob的MapReduce源码这里并没有过多深究,着重看了下Lists.partition里边是如何进行生成的:

到这里发现最终是用的subList这个方法,进入到subList看到里边的get方法其实返回的

ArrayList.this.elementData(offset + index);

是elementData对象根据分页偏移量截取的对象,而当我看到elementData对象的修饰符时,问题就看出来了:

 

 transient修饰符,说明这个elementData对象是不能被序列化的,由此,当直接用Lists.partition方法分页的对象去序列化的时候,就会报开头提到的错。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值