Caused by: com.dtstack.chunjun.throwable.NoRestartException: The dirty consumer shutdown, due to the

不认识。

于 2024-07-09 15:42:58 发布

阅读量192

点赞数 1

文章标签： flink kafka 大数据 oracle

本文链接：https://blog.csdn.net/m0_51164700/article/details/140297825

版权

使用Chunjun采集Kafka中的数据到Oracle数据库，一直报错

Caused by: com.dtstack.chunjun.throwable.NoRestartException: The dirty consumer shutdown, due to the consumed count exceed the max-consumed [0]

检查很多次对应字段类型、名字都是正确的。

最后发现，Oracle数据库名以及字段名字对字母大小写都是敏感的，把数据库名，字段名都使用大写。就可以了

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

不认识。

关注关注

1
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

Caused by: java.sql.SQLSyntaxErrorException: You have an error in your SQL syntax； check the manual

知识改变命运，ヾ(◍°∇°◍)ﾉﾞ【求关注】

04-19

4591

sql语法报错

The dirty consumer shutdown, due to the consumed count exceed the max-consumed [0]

群峰之巅的专栏

09-17

533

根据官网这篇文章的提示，应该是插入的sql语句出现了问题。字面意思是消费数量超过最大消费数量，但是我没做相关的限制，网上关于这个错误的资料比较少。使用taier框架执行同步kafka到数据库postgre sql的语句，报错。这个错误主要是字面意思容易被误导，查找原因的时候还是要从具体的错误中去确认。因为是测试，我改成两个字段就没这个问题了。

参与评论您还未登录，请先登录后发表或查看评论

ChunJun源码分析——脏数据插件

蒋含竹的博客

03-06

528

【代码】ChunJun脏数据插件——源码分析。

FlinkX 记录

qq_15138049的博客

04-17

2620

FlinkX 记录

FlinkX脏值处理

wuhulala的休息室

05-24

1894

FlinX脏值处理在大量数据的传输过程中，必定会由于各种原因导致很多数据传输报错(比如类型转换错误)，这种数据DataX认为就是脏数据。 – by DataX 配置实例 "dir

记录一次脏数据导致flink任务失败的处理

weixin_41956627的博客

01-17

1671

这个报错，我记得以前有字符长度不够时，日志会记录是哪个字段长度不够导致的，但这次的日志没有指出具体是哪个字段有问题，排查发现应该不是mysql字段长度不够导致，后来在网上看可能是时间类型字段不匹配也会导致此报错。最终抓取到异常数据，有个日期相关的字段值为‘0024-01-16’（正确的应该为2024-01-16），这个格式写入mysql的timestamp类型字段会报错。是报错中的 CreateTime = 1705403370519，是为了抓取到报错的数据；可以看出，是写入mysql的过程出错。

caused by java.io.io_springboot运行出错，Caused by: java.io.IOException

weixin_42261068的博客

02-25

2566

springboot 运行启动，能够正常启动并且运行，但是一开始就在控制台输出如此错误：不知道原因何在？？java.io.IOException: 浣犵殑涓绘満涓殑杞欢涓浜嗕竴涓凡寤虹珛鐨勮繛鎺ャ��而且这个提示的中文还乱码？如何解决org.apache.catalina.connector.ClientAbortException: java.io.IOException: 浣犵殑涓绘...

Caused by: com.fasterxml.jackson.databind.exc.InvalidFormatException:异常解决

zhou_zhao_xu的博客

05-27

5821

异常信息： Caused by: com.fasterxml.jackson.databind.exc.InvalidFormatException: Cannot deserialize value of type `java.util.Date` from String "2022-05-26 15:36:45": not a valid representation (error: Failed to parse Date value '2022-05-26 15:36:45': Cannot par

【gradle】Caused by: groovy.lang.MissingMethodException: No signature of method的解决方案和检查方法

热门推荐

HanLiangJ的博客

06-15

3万+

【gradle】Caused by: groovy.lang.MissingMethodException: No signature of method的解决方案和检查方法，记录一下踩坑过程

tomcat:Caused by:java.lang.ClassNotFoundException: javax.servlet.ServletContextListener解决方法

码农研究僧的博客

08-19

5636

目录1. 找主问题2. 普通方法3. 进阶方法 1. 找主问题出现以下问题大概是在终端中这样显示让你去查看日志 [2021-08-19 09:20:24,031] Artifact ssm项目:war exploded: Artifact is being deployed, please wait... 19-Aug-2021 21:20:26.871 信息 [RMI TCP Connection(3)-127.0.0.1] org.apache.jasper.servlet.TldScanner.

数据同步工具chunjun(flinkx)-1.12.7 使用tips

weixin_44382736的博客

03-18

1056

记录分享关于chunjun与官网描述不符的点，或是使用过程中遇到过的问题，便于快速上手

kafka shutdown停止关闭很慢问题的解决方案

aduzz62084的博客

12-31

1063

kafka shutdown停止很慢问题在数据量大的时候，consumer一次抓取数据的数据很多，进入到业务处理的数据可能有很多，假设一次poll有1万条数据进入业务程序，而且业务程序是和poll绑定在一起线程同步执行的，假设平均每条数据，执行业务程序花费100ms，那么poll一次的数...

用flink实时同步原mysql数据到备份表报错

qq_43118086的博客

05-19

950

背景用flink实时同步原mysql表数据到备份表，其中处理某一条数据时报了如下异常 switched from RUNNING to FAILED on org.apache.flink.rutime.jobmaster.slotpool.SingleLoginSlot com.mysql.cj.jdbc.exceptions.MysqlDataTraction:Out of range value for column 'type' at row 1 原表与备份表建表语句一致为 CREATE TAB

区块链 | EOS】如何正常停止nodeos？（database dirty flag set (likely due to unclean shutdown): replay required）

云深海阔专栏

05-08

789

kill 命令再次执行时会导致以下错误。 pkill -9 nodeos or kill -9 {pid} database dirty flag set (likely due to unclean shutdown): replay required 当重新运行nodeos时，必须使用--replay-blockchain命令忽略它。让我们安全的结束nodeos 进程 This appears to be two different issues. Startup after a c.

异常解决：Caused by: com.mysql.jdbc.exceptions.jdbc4.CommunicationsException: Communications link failure

w36680130的博客

07-19

253

异常解决：Caused by: com.mysql.jdbc.exceptions.jdbc4.CommunicationsException: Communications link failure

Caused by: org.quartz.SchedulerException: The Scheduler cannot be restarted after shutdown() has bee

YunSean的博客

12-28

2797

Caused by: org.quartz.SchedulerException: The Scheduler cannot be restarted after shutdown() has bee：在使用诺依框架的时候出现错误, 其他框架也是同理, 这是说明的这个端口号被占用了你可以现在查看自己项目启动的端口号是多少, 再去关掉这个端口号即可 windows 查看端口号占用并关闭万事不要慌,百度找一找! ...

亲测解决：Caused by: java.lang.ClassCastException: com.dj.managesignapp.databinding.ActivityPublicToolbar

weixin_40420578的博客

11-12

1249

完整的错误是： Caused by: java.lang.ClassCastException: com.dj.managesignapp.databinding.ActivityPublicToolbarBindingImpl cannot be cast to com.dj.login.databinding.ActivityPublicToolbarBinding 项目中，...

Flinkx的启动以及运转流程，从哪个类到哪个类（小白版）

吃素的哈士奇de博客

06-29

613

Flinkx的启动以及运转流程启动类package com.dtstack.flinkx.launcher;Main类里面的main方法各种用到的类LauncherMainMyLocalStreamEnvironment 启动类package com.dtstack.flinkx.launcher; local模式启动要经过main方法 com.dtstack.flinkx.Main.main(localArgs); Main类里面的main方法找到运行的方法 JobExecutionResult

Caused by: com.esotericsoftware.kryo.KryoException: java.lang.UnsupportedOperationException