seatunnel mysql to mysql流式传输问题求解决!

文章讨论了SeaTunnel在配置中遇到的问题,即首次能完成全量数据传输,但后续对源表的修改或新增无法实现增量同步。配置涉及MySQL-CDC数据源和JDBC目标库,寻求解决日志截图中的同步问题的建议。
摘要由CSDN通过智能技术生成

配置如下 ,问题是只能进行第一次全量传输,后续无法实现增量,在源表修改或新增,seatunnel不能同步。
ps:binlog均已打开

   env {
      # You can set SeaTunnel environment configuration here
      execution.parallelism = 2
      job.mode = "STREAMING"
      # 10秒检查一次,可以适当加大这个值
      checkpoint.interval = 5000
      #execution.checkpoint.interval = 10000
      #execution.checkpoint.data-uri = "hdfs://localhost:9000/checkpoint"
    }

    # 配置数据源
    source {
      MySQL-CDC {
        # 数据库账号
        username = "XXX"
        password = "XXX"
        # 源表,格式:数据库名.表名
        table-names = ["nbgame.test2"]
        base-url = "jdbc:mysql://192.168.x.x:3306/XXX"
        startup.mode = "initial"
      }
    }

    # 配置目标库
    sink {
      jdbc {
        url = "jdbc:mysql://192.168.109.XXX:3306/bsods"
        driver = "com.mysql.cj.jdbc.Driver"
        user = "XXX"
        password = "XXX"
        
        generate_sink_sql = true
		# 目标数据库名
        database = "bsods"
        # 目标表名
        table = "test3"
        # 主键名称
        primary_keys = ["id"]
      }

    }

部分运行日志截图如下。
在这里插入图片描述

有没有大佬帮一下

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值