Debezium系列之：详细总结数据库binlog文件不存在的几种解决方法

最新推荐文章于 2023-12-06 17:02:03 发布
最新推荐文章于 2023-12-06 17:02:03 发布
阅读量545 收藏 1
点赞数 1
分类专栏： debezium 文章标签： Debezium系列 数据库binlog文件 不存在的几种解决方法
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zhengzaifeidelushang/article/details/131586105
版权
debezium 专栏收录该内容
302 篇文章 276 订阅 ¥99.90 ¥99.00
订阅专栏

Debezium系列之：详细总结数据库binlog文件不存在的几种解决方法The connector is trying to read binlog ... but this is no longer available on the server.

一、背景

  • mysql数据库binlog文件一般有设置保存的时间，当数据库不经常更新，历史binlog文件从数据库服务器上删除后，debezium connector可能会出现下面的报错：

io.debezium.DebeziumException: The connector is trying to read binlog starting at SourceInfo [currentGtid=null, currentBinlogFilename=mysql-bin.003963, currentBinlogPosition=232524130, currentRowNumber&

了解本专栏 订阅专栏 解锁全文
最笨的羊羊
关注
  • 1
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 2
    评论
专栏目录
订阅专栏
debezium报错：no longer available on the server. Reconfigure the connector to use a snapshot when neede
zhengzaifeidelushang的博客
07-27 2990
debezium报错：no longer available on the server. Reconfigure the connector to use a snapshot when neede 完整报错如下： -“trace”:"io.debezium.DebeziumException: The connector is trying to read binlog starting at SourceInfo [currentGtid=null, currentBinlogFilename=mys
debezium报错处理系列之十五：no longer available on the server. Reconfigure the connector to use a snapshot whe
zhengzaifeidelushang的博客
05-12 861
debezium报错处理系列之十五：no longer available on the server. Reconfigure the connector to use a snapshot when neede一、debezium完整报错二、报错产生的详细原因三、报错详细解决方法 Debezium报错处理系列一：The db history topic is missing. Debezium报错处理系列二：Make sure that the same history topic isn‘t shar
Debezium for MySQL解析binlog报错
码农无双的博客
08-07 5684
运行在Kafka Connect 分布式worker上的debezium for mysql connector报错： {"name":"debezium-mysql-source-dev","connector":{"state":"RUNNING","worker_id":&q
FlinkCDC作业处理慢追不上binlog产生的速度，导致binlog被清理的解决方案
weixin_43777152的博客
02-14 2917
Caused by: java.lang.IllegalStateException: The connector is trying to read binlog starting at Struct{version=1.6.4.Final,connector=mysql,name=mysql_binlog_source,ts_ms=1668149633760,db=,server_id=0,file=mysql-bin.003889,pos=116719908,row=0}, but this is n
dinky postgres-cdc to mysql 提示io.debezium.DebeziumException: Creation of replication slot failed
最新发布
yang_weidong的博客
12-06 560
【代码】dinky postgres-cdc to mysql 提示io.debezium.DebeziumException: Creation of replication slot failed。
flinkCDC报错：but this is no longer available on the server
jackfeng86的专栏
04-13 4529
Caused by: org.apache.kafka.connect.errors.ConnectException: The connector is trying to read binlog starting at GTIDs afc2c4d5-7061-11ec-a4a5-00163e35e020:1-1717327 and binlog file 'mysql-bin.000443', pos=6207230, skipping 0 events plus 0 rows, but this is
Flink CDC报The connector is trying to read binlog starting at xxx but this is no longer available问题解决
qq_41018861的博客
06-09 2223
在FlinkCDC的issues,我见到了比较多的人提了问题，官方建议mysql 侧 binlog文件日期保留长点但是，依然解决不了问题。并且对于读账号问题10s问题阿里云官方并未说明，笔者也是咨询大佬才了解到。社区有人建议试试加这个配置笔者尚未实践，之后考虑加一下试试。如果大家和笔者一样实在没有办法就选择重启吧。FlinkCDC对这个问题的优化并没有很好。
flink1.13报错总结
laijunlin_data的博客
06-05 1019
flink报错总结
flink cdc 的 问题
剑雨江湖
03-22 3754
问题一 2022-03-21 11:44:29,859 INFO io.debezium.jdbc.JdbcConnection [] - Connection gracefully closed 2022-03-21 11:44:29,859 INFO io.debezium.connector.mysql.MySqlConnectorTask [] - Connector task finished all .
wing-binlog-go:基于MySQL数据库binlog的分布式增量订阅和消费
05-11
wing-binlog-go是一种高性能的Mysql / MariaDB中间件 wing-binlog-go是一个轻量级的Mysql / MariaDB数据监视系统 wing-binlog-go可以在OSX，Linux和Windows系统上运行。 安装： 在Xnix上，运行./bin/build.sh 在...
mysql主从数据库不同步的2种解决方法
12-15
今天发现Mysql的主从数据库没有同步 先上Master库： mysql>show processlist; 查看下进程是否Sleep太多。发现很正常。 show master status; 也正常。 mysql> show master status; +——————-+———-+————–...
mysql问题之slow log中出现大量的binlog dump记录的解决方法
01-21
线上有个数据库，在slow log中，存在大量类似下面的记录： 代码如下: # Time: 130823 13:56:08 # User@Host: repl[repl] @ slave [10.x.x.x] # Query_time: 9.000833 Lock_time: 0.000000 Rows_sent: 1 Rows_...
Linux上通过binlog文件恢复mysql数据库详细步骤
09-10
binglog文件是服务器的二进制日志记录着该数据库的所有增删改的操作日志，接下来通过本文给大家介绍linux上通过binlog文件恢复mysql数据库详细步骤，非常不错，需要的朋友参考下
Mysql的Binlog数据恢复:不小心删除数据库详解
09-09
主要介绍了Mysql的Binlog数据恢复，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
【Flink】关于jvm元空间溢出，mysql binlog冲突的问题解决
偶尔写些东西，意思一下我也参与了内卷
09-05 1405
：原理就是我们把原来7张在一个数据库的表放到一个flink source中读取，在指定传输到那个starrocks表时，官方已经实现了代码支持，我们只需要增加一个flink算子转换成sink支持的对象即可，（关联一个source对应多个sink解决思路）可以看官方的issues： https://issues.apache.org/jira/browse/FLINK-11205 https://issues.apache.org/jira/browse/FLINK-16408这里需要注意和以前的jar会造成
实时采集报错：io.debezium.DebeziumException: Unknown command Error code: 1047； SQLSTATE: HY000.
wlove514的博客
01-10 1145
使用KafkaConnect对MySQL进行实时采集的过程中出现启动异常的问题，其中集群环境和MySQL服务器均在云服务。
Debezium报错处理系列之三十一：Caused by: com.microsoft.sqlserver.jdbc.SQLServerException: 为过程或函数 cdc.fn_cdc
zhengzaifeidelushang的博客
11-06 928
Debezium报错处理系列之三十一：Caused by: com.microsoft.sqlserver.jdbc.SQLServerException: 为过程或函数 cdc.fn_cdc_get_all_changes_ ... 提供的参数数目不足。
[debezium 源码分析] MySqlConnectorTask 启动和拉取数据过程分析
laomei
03-13 2842
MySqlConnectorTask的poll方法会获取，并将这些数据存入kafka内。 start 方法 现在先分析MySqlConnectorTask.start方法，下面是一部分代码 ... this.taskContext.start(); boolean startWithSnapshot = false; boolean snapshotEventsAreInserts ...
caused by: io.debezium.debeziumexception: cannot read the binlog filename an
06-06
这个错误是由Debezium引擎在读取binlog文件的时候发生的。通常情况下，只要确保Debezium引擎有权限访问MySQL服务器的binlog文件，这个错误就不应该出现。 如果您的Debezium引擎已经被授权访问binlog文件但仍然遇到了这个错误，那么可能是由于binlog文件已经被删除或已经被移动到其他位置。在这种情况下，您需要检查MySQL服务器的设置并确认binlog文件的位置。 必要时，您可以通过MySQL的命令行工具或其他工具查询binlog文件的位置。然后，将binlog文件的位置更新到Debezium引擎的配置文件中，以确保Debezium引擎能够正确地读取binlog文件并按照配置进行数据操作和同步。 总之，无论是什么原因导致的这个错误，都需要仔细检查Debezium引擎的配置和MySQL服务器的设置，以确保所有设置都正确无误，使Debezium引擎能够正常工作。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

最笨的羊羊

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值