【Flink】Flink 1.17 报错 RpcLoaderException: could not load RpcSystem

于 2024-04-08 08:30:00 发布
阅读量231 收藏 3
点赞数 11
分类专栏： 大数据-flink 文章标签： flink 大数据
本文为博主九师兄（QQ:541711153 欢迎来探讨技术）原创文章，未经允许博主不允许转载。
本文链接：https://blog.csdn.net/qq_21383435/article/details/134062900
版权
大数据-flink 专栏收录该内容
836 篇文章 827 订阅 ¥99.90 ¥99.00
订阅专栏

在这里插入图片描述

1.概述

问题背景参考：【Flink】Flink 1.13版本升级到Flink 1.17版本

我是从Flink 1.13版本升级到Flink 1.17版本，因为flink 1.13版本是好的，各种任务都能运行，本次升级主要是包的问题，最主要的是Flink去掉了很多scala的依赖。

在这里插入图片描述
可以看到从1.15版本开始去掉scala依赖的，本次升级大问题没有多少的。

但是运行任务报错: # 1.概述
问题背景参考：【Flink】Flink 1.13版本升级到Flink 1.17版本

我是从Flink 1.13版本升级到Flink 1.17版本，因为flink 1.13版本是好的，各种任务都能运行，本次升级主要是包的问题，最主要的是Flink去掉了很多scala的依赖。

在这里插入图片描述
可以看到从1.15版本开始去掉scala依赖的，本次升级大问题没有多少的。

但是运行任务报错

了解本专栏 订阅专栏 解锁全文
九师兄
关注
  • 11
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 4
    评论
专栏目录
订阅专栏
flink实战--开发中常见的错误与问题
阿华田的博客
12-19 1万+
常见错误集 1.Checkpoint失败：Checkpoint expired before completing env.enableCheckpointing(1000L) val checkpointConf = env.getCheckpointConfig checkpointConf.setMinPauseBetweenCheckp...
Flink CEP学习线路指导1：Flink CEP入门
01-07
问题导读 1.Flink CEP是什么？2.Flink CEP可以做哪些事情？3.Flink CEP和流式处理有什么区别？...CEP在Flink未产生以前，已经有CEP，并不是有了Flink才有CEP，我们这里重点是讲Flink CEP。CEP本身的含义
flink常见故障排除
第一片心意的博客
10-16 6401
flink常见故障排除
flink底层RPC调用
Alice_whj的博客
12-03 564
底层RPC框架基于Akka实现 Akka介绍 Akka是一个开发并发、容错和可伸缩应用的框架。它是Actor Model的一个实现，和Erlang的并发模型很像。在Actor模型中，所有的实体被认为是独立的actors。actors和其他actors通过发送异步消息通信。Actor模型的强大来自于异步。它也可以显式等待响应，这使得可以执行同步操作。但是，强烈不建议同步消息，因为它们限制了系统的伸缩...
【Flink】Flink 源码之RPC调用
九师兄
01-18 918
1.概述 转载：Flink 源码之RPC调用 2.简介 本篇为大家分析Flink底层RPC调用的执行过程和原理。Flink RPC使用了Akka Actor框架。建议阅读前需要Akka Actor的基础知识。 Flink为了简化Actor的使用，对Actor做了一系列封装。定义了如下几个重要的接口或类： RpcService：定义了RPC服务端（调用和被调用端）的一系列行为，远程调用需要指定地址和端口号。包含服务的启停，和连接其他远程的RpcService。 AkkaRpcService：RpcS.
进不去系统rpc服务器不可用,rpc服务器不可用_详细解决方法,彻底修复
weixin_36459720的博客
07-31 4983
rpc服务器不可用_详细解决方法,彻底修复2018-11-23在我们遇到rpc服务器不可用这个错误时,不要紧张,这个错误很普通,现在我来教大家一套详细的解决办法.在解决这个问题之前,我们先来了解,什么是rpc服务器不可用,他是怎么造成的rpc服务器不可用是指-RPC(RPCremote procedure call )服务没有正常启动。首先我们要重起这个服务,方法:点击开始→设置→控制面板→管理工...
flink on yarn 缺少依赖NoClassDefFoundError: com/sun/jersey
06-06
flink-hadoop-compatibility_2.12-1.7.1.jar javax.ws.rs-api-2.0.1.jar jersey-common-2.27.jar jersey-core-1.19.4.jar 解决 Exception in thread "main" java.lang.NoClassDefFoundError: ...
Flink笔记(二十)：Flink 之 State 状态介绍
01-07
 Flink 架构体系的一大特性是：有状态计算。 有状态计算：任务执行过程中，会存储计算过程中产生的中间结果，并提供后续的 Function 或 算子计算结果使用 状态：任务内部数据（计算数据和元数据属性）的快照。在...
Flink笔记(十九)：Flink 从 Checkpoint 中恢复数据
01-20
接上文：Flink笔记(十八)：Flink 之 StateBackend 介绍 & 使用，本文介绍 Flink 从 Checkpoint 中恢复数据。 当 Flink 任务提交后，只有遇到 1.程序错误、2.人为 Cancel掉，任务就会停止。 1. 任务异常，设置保存 ...
flink-clickhouse-sink:Flink水槽的Clickhouse
05-17
Flink-ClickHouse-Sink 描述 用于数据库的器。 由。 用于将数据加载到ClickHouse的高性能库。 它有两个触发器来加载数据：超时和缓冲区大小。 版本图 闪烁 flink-clickhouse-sink 1.3。* 1.0.0 1.9。* 1.3.1 ...
FlinkSQL实战：HBase的结合应用
02-23
而当下FlinkSQL的火热程度不用多说，FlinkSQL也为HBase提供了connector，因此HBase与FlinkSQL的结合非常有必要实践实践。当然，本文假设用户有一定的HBase知识基础，不会详细去介绍HBase的架构和原理，本文着重介绍...
iceberg-flink-runtime-1.17-1.3.1.jar
08-23
iceberg-flink-runtime-1.17-1.3.1.jar 数据湖 数仓
hudi-flink1.17-bundle-0.14.0.jar
12-22
这是Flink1.17、hudi 0.14 、hadoop 3.3.4、hive 3.1.3、Spark 3.2.3 编译出来的版本
flink-web：Apache Flink网站
02-05
该存储库包含Flink网站： : 。 您可以在以下位置找到此存储库的说明： : 。 在本地测试更改 您可以使用如下所示的Docker来构建网站（而无需增加主机环境）。 作为此调用的一部分传递的参数将转发到build.sh 。 # ...
hudi-flink1.17-bundle-0.14.0-sources.jar
12-22
这是Flink1.17、hudi 0.14 、hadoop 3.3.4、hive 3.1.3、Spark 3.2.3 编译出来的版本
flink任务常见报错及解决办法
热门推荐
yiweiyi329的博客
08-06 3万+
1、flink任务无法从checkpoint启动 场景一、flink任务运行过程中出现异常时（如checkpoint失败次数超过配置阈值），自动重启出现算子异常，无法恢复正常运行。 场景二、手动下线任务，选择上一次的checkpoint启动时，出现算子异常，无法启动。 报错如下： java.lang.Exception: Exception while creating StreamOperatorStateContext. at org.apache.flink.streaming.api.
Flink检查点失败问题-汇总
fct2001140269的博客
03-21 1万+
flink从检查点中恢复的问题 从检查点恢复的时候，命令 ./flink run -s hdfs://192.xxx.xxx.xx:port/data1/flink/checkpoint1 -c com.mymain.MyTestMain 报出以下错误： java.util.concurrent.CompletionException: org.apache.flink.util.FlinkExc...
运行flink程序所出现的异常及其解决方案
一路走下去的博客
10-29 2万+
下面的我在测试中遇到的几个问题及解决方案。 1. The assigned slot container_e08_1539148828017_15937_01_003564_0 was removed. org.apache.flink.util.FlinkException: The assigned slot container_e08_1539148828017_15937_01_0035...
Flink rpc实践
METON的博客
10-06 923
Flink的RPC服务是基于Akka Remote实现的 一个简单的Akka Remoting ActorSystem的配置如下(基于akka 2.6.0版本)：服务端配置及代码：application_server.conf akka { actor { provider = remote allow-java-serialization = on serializers { jackson-json = "akka.serialization.jackson
安装python flink时候报错ModuleNotFoundError: No module named 'distutils'
最新发布
02-22
安装Python Flink时报错"ModuleNotFoundError: No module named 'disutils'"是因为缺少distutils模块。distutils是Python的标准库之一，用于构建和安装Python模块。 要解决这个问题，你可以按照以下步骤进行操作： 1. 确保你已经正确安装了Python。你可以在命令行中输入`python --version`来检查Python的版本。 2. 如果你使用的是Python 2.x版本，那么distutils应该已经包含在Python的标准库中，无需额外安装。 3. 如果你使用的是Python 3.x版本，并且在安装Python时选择了"Minimize disk space usage"选项，那么distutils模块可能没有被安装。你可以尝试重新安装Python，并选择"Full installation"选项来确保distutils被正确安装。 4. 如果以上方法都无效，你可以尝试手动安装distutils模块。首先，下载distutils的安装包（通常是一个压缩文件），然后解压缩并进入解压后的目录。在命令行中运行以下命令进行安装： ``` python setup.py install ``` 这将会安装distutils模块到你的Python环境中。 如果你还有其他问题，请继续提问。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 4
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

九师兄

你的鼓励是我做大写作的动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值