Flink任务报错记录

最新推荐文章于 2022-11-03 14:03:56 发布
最新推荐文章于 2022-11-03 14:03:56 发布
阅读量2k 收藏 1
点赞数 2
分类专栏： 大数据组件 文章标签： flink html5 javascript
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zwahut/article/details/119916447
版权

1、报错信息如下

org.apache.flink.client.program.ProgramInvocationException: The main method caused an error: Zero-length character strings have no serializable string representation.
 at org.apache.flink.client.program.PackagedProgram.callMainMethod(PackagedProgram.java:302)
 at org.apache.flink.client.program.PackagedProgram.invokeInteractiveModeForExecution(PackagedProgram.java:198)

 sql中的字段类型和ddl中的字段类型没对上，或者字段名称，个数没对上

2、时间转为unix时间

转完之后的类型是BIGINT

3、经纬度同步到es

报错是经度和维度搞反了，正确如下：

concat(wd,',',jd) as location 

 

 

未竟
关注
  • 2
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
使用了flink官方示例，尽然提交任务后报错了
github_56967035的博客
06-26 1万+
使用了flink官方示例，尽然提交任务后报错了 背景：参考flink的官方示例，开发FlinkSQL的ETL应用。ETL应用从kafka消费数据，经过数据处理，将处理后的结果数据下沉存储到Clickhouse中。 问题：工程的pom文件中明明依赖了相关连接器,本地运行正常。但打包提交应用到flink时，却报错确少连接器依赖。 错误日志 当pom.xml中依赖的Kafka连接器依赖放置在Clickhouse连接器前面,报错下面日志： The program finished with the follo
flink任务调度器
06-20
Flink任务调度器是Apache Flink这一开源流处理框架的核心组件之一，它的主要职责是高效、灵活地管理和执行Flink程序中的数据处理任务。在理解Flink任务调度器之前，我们先简要介绍下Flink的基本概念。 Apache Flink...
flink sql包冲突异常
热门推荐
帆了个帆的专栏
04-21 1万+
使用flink on yarn方式提交Flink sql，抛出如下异常 org.apache.flink.client.program.ProgramInvocationException: The main method caused an error: Unable to instantiate java compiler at org.apache.flink.client.progr...
org.apache.flink.client.program.ProgramInvocationException: The main method caused an error
weixin_44168526的博客
03-12 1万+
flink任务重开启检查点并设置状态后端后，提交任务运行，出现以上错误，具体错误如下： org.apache.flink.client.program.ProgramInvocationException: The main method caused an error: org.apache.flink.runtime.concurrent.FutureUtils$RetryException: Could not complete the operation. Number of retries .
Flink异常笔记
sunyaox的博客
06-22 1070
这里写自定义目录标题Flink异常笔记20210622 Flink异常笔记 20210622 1.The main method caused an error: Unable to instantiate java compiler org.apache.flink.client.program.ProgramInvocationException: The main method caused an error: Unable to instantiate java compiler at org.a
org.apache.flink.client.program.ProgramInvocationException: The main method caused an error: Failed
weixin_60811028的博客
05-05 4582
在idea上执行flinkCDC是正常的，结果到了Linux上报异常： Caused by: org.apache.flink.core.fs.UnsupportedFileSystemSchemeException: Hadoop is not in the classpath/dependencies. at org.apache.flink.core.fs.UnsupportedSchemeFactory.create(UnsupportedSchemeFactory.java:5
flink问题集锦
Chenftli的博客
03-18 4067
报错一： Could not get job jar and dependencies from JAR file: JAR file does not exist: -yn 原因：flink1.8版本之后已弃用该参数，ResourceManager将自动启动所需的尽可能多的容器，以满足作业请求的并行性。解决方法：去掉即可 报错二： java.lang.IllegalStateException: No Executor found. Please make sure to export the HA
grafana-Flink 任务监控.json
05-24
grafana上Flink 任务监控使用的json文件，基于flink-1.15.x版本
flink学习资料案例记录
07-25
flink学习资料案例记录
flink任务分process处理方案
05-03
标题中的“flink任务分process处理方案”是指在Apache Flink这一流处理框架中，采用特定的处理方式来组织和管理任务。Flink是一个开源的流处理和批处理系统，它支持实时数据处理和复杂事件处理，适用于大数据分析、...
big-whale:Spark、Flink等离线任务的调度以及实时任务的监控
05-13
巨鲸任务调度平台为美柚大数据研发的分布式计算任务调度系统，提供Spark、Flink等批处理任务的DAG调度和流处理任务的运行管理和状态监控，并具有Yarn应用管理、重复应用检测、大内存应用检测等功能。 服务基于Spring...
【Flnik】解决提交程序到flink集群的异常：Could not complete snapshot 3 for operator Source...
懒懒的小白
07-22 4387
Flink程序运行异常 ：Failure reason: Checkpoint was declined
org.apache.flink.client.program.ProgramInvocationException: The main method caused an error: org.apa
qq_48499752的博客
11-03 1694
fink中异常
[1133]flink问题集锦
周小董
04-23 5900
文章目录 问题1： Could not get job jar and dependencies from JAR file: JAR file does not exist: -yn 原因：flink1.8版本之后已弃用该参数，ResourceManager将自动启动所需的尽可能多的容器，以满足作业请求的并行性。解决方法：去掉即可 问题2： java.lang.IllegalStateException: No Executor found. Please make sure to export t
运行maven生成的jar包显示class “XXX“ not found
破晓的成长之路
11-25 4995
背景：在idea下生成jar包，发现jar包大小仅有1.8KB，如下 实行jar包时报错如下 org.apache.flink.client.program.ProgramInvocationException: The program's entry point class 'ecnu.day01.WordCount' was not found in the jar file. 直接打开j...
Flink提交时：Could not find a file system implementation for scheme ‘hdfs‘
我的博客
03-18 1730
命令和错误日志： [hadoop@localhost ~]$ flink run -c WordCountSourceDataStreamYarn ~/IdeaProjects/FlinkStudy/target/FlinkStudy-1.0-SNAPSHOT.jar ------------------------------------------------------------ The program finished with the following exception: org.ap
踩坑——Flink报错 Cannot currently handle nodes with more than 64 outputs.
@羲凡—只为更好的活着
01-22 1236
@羲凡——只为了更好的活着 踩坑——Flink报错 java.lang.NoSuchMethodError: org.apache.hadoop.hbase.client.HTable.getTableName()[B 一.问题背景 一开始公司用cm5安装的hadoop2.0集群(Hbase是1.2.0版本)，有个需求我用代码已经写好了，但是在快上线的时候决定用cm6安装的hadoop3.0(Hb...
Flink任务执行失败:java.lang.NoSuchMethodError: scala.Predef$.refArrayOps([Ljava/lang/Object；)Lscala/collec
m0_47144688的博客
09-03 2158
Flink任务执行失败的解决方案
org.apache.flink.client.program.ProgramInvocationException: Could not retrieve the execution result
剑雨江湖
07-05 1万+
org.apache.flink.client.program.ProgramInvocationException: Could not retrieve the execution result. at org.apache.flink.client.program.rest.RestClusterClient.submitJob(RestClusterClient.java...
flink任务报错java.util.NoSuchElementException: No value present in Option
最新发布
09-16
这个错误通常表示在使用 `Option` 类型时，没有值可用。`Option` 是一个可以有可选值的容器类，它可以是 `Some`（有值）或 `None`（没有值）。 要解决这个问题，你可以使用 `.getOrElse()` 方法来获取 `Option` 对象中的值，如果没有值则使用默认值。例如： ```java Option<String> option = ...; // 你的 Option 对象 String value = option.getOrElse("default value"); ``` 这样，如果 `option` 中没有值，就会返回默认值 "default value"。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值