Flink cdc 同步mysql 初始化同步报错 The slave is connecting using CHANGE MASTER TO MASTER_AUTO_POSITION = 1

已于 2023-03-31 18:06:49 修改
阅读量1k 收藏
点赞数
文章标签： mysql flink 数据库
于 2023-03-22 16:14:54 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_30366667/article/details/129712453
版权

flink cdc 同步mysql 报错 The slave is connecting using CHANGE MASTER TO MASTER_AUTO_POSITION = 1, but the master has purged binary logs containing GTIDs that the slave requires

上述问题报错的原因是binlog过期了，被pured了

情况1.快照时间过长，binlog保留时间太短

情况2.快照时间很短，binlog保留时间很长，但也报这个错。

情况3.压根就没有binlog，没有开启binlog主从同步，最好让dba确认下，真的坑

情况2没办法解决，解决方法是绕过问题，先通过其他方式把整表同步一份，然后把同步策略改为指定binlog offset 从最近开始同步。

情况三，让dba把主从同步加上

身体健康,万事如意
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
【FLink】FLink 流任务一直 卡在 RUNNING 或者 初始化状态
九师兄
12-09 2069
有一次我在flink运行的时候因为要调试，然后在open方法中执行了一个sleep方法，导致任务一直卡着或者在初始化状态中上诉代码，测试完忘记该回去了，结果一直错误。
mysql gtid 1236错误_解决mysql开启GTID主从同步出现1236错误问题
weixin_42360467的博客
01-18 1313
最近遇到mysql开启gtid做复制时，从库出现1236错误，导致同步无法进行，本文就这问题记录下处理步骤，有关gtid知识在这里不做介绍，mysql版本为5.7.16。一、错误原因分析错误信息如下：Last_IO_Errno: 1236Last_IO_Error: Got fatal error 1236 from master when reading data from binary log...
the slave is connecting using CHANGE MASTER TO MASTER_AUTO_POSITION = 1, but the master has purged b
niubihonghong1111的博客
09-06 3299
he slave is connecting using CHANGE MASTER TO MASTER_AUTO_POSITION = 1, but the master has purged binary logs containing GTIDs that the slave requires https://www.cnblogs.com/dukuan/p/8744295.html
canal mysql slave
weixin_30861459的博客
02-19 127
[mysqld] log-bin=mysql-bin #添加这一行就ok binlog-format=ROW #选择row模式 server_id=1 #配置mysql replaction需要定义，不能和canal的slaveId重复 b. canal的原理是模拟自己为mysql slave，所以这里一定需要做为mysql slave的相关权限. CREATE USER canal...
MASTER_AUTO_POSITION but the master has purged binary logs containing GTIDs that the slave requires.
李笑男的博客
05-17 2835
搭建GTID复制， 报错： 'The slave is connecting using CHANGE MASTER TO MASTER_AUTO_POSITION = 1, but the master has purged binary logs containing GTIDs that the slave requires. 解决方案： 主库： mysql> show global variables like 'gtid_purged'; 记下主库的gtid_purged的值 从库： 从
Flink CDC MySQL同步MySQL（一）
07-06
jdbc
基于Flink CDC使用datastream方式全量增量同步mysql to mysql
03-04
基于Flink CDC使用datastream方式全量增量同步mysql to mysql 使用的是java语言，只需配置完源数据库和目标数据库信息，运行MysqlCDC中的main函数，即可实现多库多表同步。
使用flink-connector-sqlserver-cdc 2.3.0把数据从SQL Server实时同步到MySQL中
06-25
本话题将详细讲解如何利用Flink的SQL Server Change Data Capture (CDC) 连接器版本2.3.0，将SQL Server中的数据实时同步到MySQL数据库。 首先，让我们了解什么是CDC。CDC是一种数据库技术，它能够捕获数据库中的...
mysql实时同步pg
最新发布
01-17
Flink CDC是一种基于Flink的Change Data Capture（CDC）工具，用于实现数据库之间的实时数据同步。在这个场景中，我们将使用Flink CDC来实现MySQL到PostgreSQL的实时数据同步。 首先，我们需要配置源数据库和目标...
Flink_10_CDC(个人总结)
hellosrc的博客
03-04 3629
    声明: 1. 本文为我的个人复习总结, 并非那种从零基础开始普及知识 内容详细全面, 言辞官方的文章               2. 由于是个人总结, 所以用最精简的话语来写文章            
解决mysql开启GTID主从同步出现1236错误问题
wzy0623的专栏
07-14 3137
最近遇到mysql开启gtid做复制时，从库出现1236错误，导致同步无法进行，本文就这问题记录下处理步骤，有关gtid知识在这里不做介绍，mysql版本为5.7.16。 一、错误原因分析 错误信息如下： Last_IO_Errno: 1236 Last_IO_Error: Got fatal error 1236 from master when reading data from binary log: 'The slave is connecting usi...
mysql主从复制报错：the master has purged binary logs containing GTIDs that the slave requires
雅冰石的专栏
03-13 6700
方法一具体案例： 拓扑架构为A->B->C，假如从库C的复制报错了，原因：需要的binlog在B上被purge掉了，而A上的binlog完整无损。 解决办法：将C指向A进行复制。 在C上执行： stop slave; change master to master_host='A的IP',master_port=A的端口号,MASTER_USER='RepUser',MASTE......
mysql gtid 1236_开启GTID主从同步出现1236错误问题
weixin_33256233的博客
01-27 535
最近遇到mysql开启gtid做复制时，主从同步断开，从库出现1236错误，导致同步无法进行，本文就这问题记录下处理步骤Got fatal error 1236 from master when reading data from binary log: ‘The slave is connecting using CHANGE MASTER TO MASTER_AUTO_POSITION = 1...
【mysql案例】mysql5.6--ERROR 1776 (HY000)-change master to遇到的报错
10-09 2746
ERROR 1776 (HY000): ParametersMASTER_LOG_FILE, MASTER_LOG_POS, RELAY_LOG_FILE and RELAY_LOG_POS cannot be setwhen MASTER_AUTO_POSITION is active.
sql ssl安全错误_一次Mysql主从复制出现1236错误解决全过程
weixin_29867767的博客
01-25 342
故障描述自己搭建了一套mysql5.7.26的主从复制环境，有2个多月没怎么管它，今天上去想要做一个因为主键冲突，导致失败的测试，发现mysql主从复制已经断开了，上去一看报了1236错误，详细错误信息如下所示：[root@localhost] 16:54:01 [testdb1]>show slave statusG;*************************** 1. row *...
erosa mysql_聊聊canal的MysqlConnection
weixin_30291543的博客
02-05 190
序本文主要研究一下canal的MysqlConnectionErosaConnectioncanal-1.1.4/parse/src/main/java/com/alibaba/otter/canal/parse/inbound/ErosaConnection.javapublic interface ErosaConnection {public void connect() throws IO...
Mysql8 MHA高可用搭建之主从复制配置
m0_67505824的博客
03-14 1296
mysql8主从配置 1、在所有主从上执行，因为每个机器都有可能使master： 2、修改所有主从的配置文件my.cnf： 3、重启这三台机器，分别执行： 4、进入slave01的mysql命令行，执行： 5、遇到的问题总结: 1、在所有主从上执行，因为每个机器都有可能使master： # mysql -u root -p -h 127.0.0.1 create user 'repl'@'%' identified with mysql_native_password by 'pass456';
Mysql主从同步报错问题解决 Slave_IO_Running NO
Ask Self，Ask Tomorrow
08-24 938
--slave 报错信息 show slave statusError: Got fatal error 1236 from master when reading data from binary log: 'The slave is connecting using CHANGE MASTER TO MASTER_AUTO_POSITION = 1, but the master has pur
flink cdc同步mysql注意事项
11-02
在使用Flink CDC同步MySQL时，需要注意以下几点： 1. 需要下载并放置flink-sql-connector-mysql-cdc-2.0.0.jar文件到<FLINK_HOME>/lib/目录下。 2. 在创建MySQL的源表时，需要指定'connector'='mysql-cdc'，并且设置...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值