java.io.InvalidClassException:stream classdesc serialVersionUID = *, local class serialVersionUID=*

在项目中使用到Spark Streaming,设置了checkpoint为HDFS的路径/hadoop/datas,但运行时报错:

java.io.InvalidClassException......:stream classdesc serialVersionUID = *, local class serialVersionUID=*,

提示序列化版本不一致,根据网上解决方案——显式指定serialVersionUID:

  private static final long serialVersionUID = ***;

显式指定id后依然报错。

解决方法:
后来发现,在本地d盘也有一样的路径/hadoop/datas,这个路径下存放了checkpoint信息,推断原因为首先识别到本地的checkpoint路径,导致没有去识别HDFS的checkpoint路径。

因此,把本地路径的文件夹下删除后解决。

本文仅为个人记录,如有侵权/错误,恳请指出 (╹▽╹)…

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
这个报错信息"local class incompatible: stream classdesc serialVersionUID = 510, local class serialVersionUID = 520"表示正在尝试反序列化一个对象,但是该对象的类的serialVersionUID与当前类的serialVersionUID不兼容。serialVersionUID是一个用于标识序列化类的唯一ID,用于确保序列化和反序列化的一致性。 在Java序列化机制中,当反序列化一个对象时,会比较该对象的serialVersionUID和当前类的serialVersionUID,如果不一致则会抛出"local class incompatible"的异常。 在你提供的引用中,报错信息中的serialVersionUID分别为510和520,说明正在反序列化的对象的serialVersionUID为510,而当前类的serialVersionUID为520,因此它们不兼容,导致报错。 为了解决这个问题,你可以考虑以下几个方法: 1. 检查你的代码,确认是否对被序列化的类进行了修改,包括添加、删除或更改了字段或方法。如果是的话,你需要更新当前类的serialVersionUID,使其与被序列化的类保持一致。 2. 如果你没有对被序列化的类进行修改,可能是因为你使用的是不同版本的类库或者类路径中存在多个版本的类。你可以尝试使用相同版本的类库或者确保类路径中只存在一个版本的类。 3. 如果以上方法都不起作用,你可以考虑重新序列化对象,以更新其serialVersionUID,或者采用其他的序列化方式。 总结来说,"local class incompatible: stream classdesc serialVersionUID = 510, local class serialVersionUID = 520"表示正在反序列化的对象的serialVersionUID与当前类的serialVersionUID不兼容,可能需要更新当前类的serialVersionUID或采用其他的解决方法。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *3* [java.io.InvalidClassException:local class incompatible: stream classdesc serialV](https://blog.csdn.net/iteye_11753/article/details/82232552)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_1"}}] [.reference_item style="max-width: 50%"] - *2* [local class incompatible: stream classdesc serialVersionUID = 1, local class serialVersionUID = 2427](https://blog.csdn.net/zzztimes/article/details/124984670)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_1"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值