bug记录: 本地idea运行没有问题,打包后出现ClassNotFoundException: org.apache.flink.util.OptionalFailure。

1 篇文章 0 订阅
1 篇文章 0 订阅

问题背景

最近在搞数据中台项目,用到了flink框架,在获取flink指标项的时候出现了异常.
     

异常调用代码

ClusterClient.getAccumulators(JobID var1);

出现了类加载不到的异常

ClassNotFoundException: org.apache.flink.util.OptionalFailure

奇怪的是,本地运行没有任何问题,我们是springboot项目,打包运行后出现类找不到的异常。

解决思路:

追踪代码后,基本定位到是classloader加载的问题。于是在项目中增加测试用例。

   @GetMapping("/load")
    public Object load() {
        ClassLoader systemClassLoader = ClassLoader.getSystemClassLoader();
        System.out.println("getSystemClassLoader ----> " + systemClassLoader);
        String classPath = System.getProperty("java.class.path");
        for (String path : classPath.split(":")) {
            System.out.println(path);
        }

        System.out.println("getThreadClassLoader ----> " + Thread.currentThread().getContextClassLoader());

        System.out.println("OptionalFailureLoader ---->" + 
       OptionalFailure.class.getClassLoader());
        return AjaxResult.success();
    }

结果发现,本地运行和springboot打包后,同一个类的classloader是不一样的,本地启动的classlaoder是sun.misc.Launcher$AppClassLoader。

但是执行java -jar启动后,类加载器是org.springframework.boot.loader.LaunchedURLClassLoader,这是因为spring项目自定义了classloader来加载文件。

那么他们两个是什么关系呢?

打包后,输出结果

getSystemClassLoader ----> sun.misc.Launcher$AppClassLoader@70dea4e
getThreadClassLoader ----> TomcatEmbeddedWebappClassLoader
  context: ROOT
  delegate: true
----------> Parent Classloader:
org.springframework.boot.loader.LaunchedURLClassLoader@533ddba

OptionalFailureLoader ---->org.springframework.boot.loader.LaunchedURLClassLoader@533ddba

可以看到,打包后,OptionalFailtureLoader的类加载器是springboot的classloader加载的,但是我们调用方法传递的是getSystemclassloader,--> sun.misc.Launcher$AppClassLoader,这样根据双亲委派机制,向上寻找肯定是找不到的。

修改方案

 在调用时传递classloader,将当前线程的classloader传递进去。根据上图,当前线程的classsloader是TomcatEmbeddedWebappClassLoader,父classloader是org.springframework.boot.loader.LaunchedURLClassLoader,而打包后,OptionalFailureLoader就是由org.springframework.boot.loader.LaunchedURLClassLoader加载的,双亲委派向上查找,就可以找到对应的java类。这样就可以解决问题。

  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
ClassNotFoundException: org.apache.flink.runtime.state.CheckpointStorageException 是一个Java异常,表示无法找到指定的类或接口。在这种情况下,类 org.apache.flink.runtime.state.CheckpointStorageException 在程序的 classpath 中无法找到。 Flink 是一个用于分布式流处理和批处理的开源框架。在 Flink 中,CheckpointStorageException 是一个用于处理状态检查点存储问题的异常类。它是 Flink 的状态后端 (state backend) 在存储检查点期间可能发生的异常的基类之一。 当程序在启动或运行时抛出 ClassNotFoundException: org.apache.flink.runtime.state.CheckpointStorageException 异常时,表示 Flink 在查找或加载与检查点存储相关的类时遇到了问题。这可能是由以下原因引起的: 1. 缺少所需的 Flink 依赖项。解决方法是检查程序的 classpath,确保所有必需的 Flink 依赖项都已包含在其中。可以通过在构建工具 (如 Maven 或 Gradle) 的配置文件中添加正确的依赖项来解决此问题。 2. 版本不匹配。如果程序中使用的 Flink 版本与检查点存储实现版本不匹配,可能会导致 ClassNotFoundException。确保使用的 Flink 版本和检查点存储实现的版本兼容。 3. 检查点存储实现不可用。某些情况下,可能需要自定义检查点存储实现。如果没有正确配置或者实现有问题,可能会导致 ClassNotFoundException。确保正确配置检查点存储实现,并确保它可用并可访问。 总之,ClassNotFoundException: org.apache.flink.runtime.state.CheckpointStorageException 是一个表示无法找到 Flink 检查点存储相关类的异常。解决这个问题通常包括检查程序的依赖项和版本,以及确保正确配置和可访问的检查点存储实现。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值