帆软之使用FineTube将mysql数据增量同步至简道云

准备:
1.mysql开启binlog(oracle对应是cdc)
2.FT数据源连接mysql
3.mysql数据已经全量推送至简道云,操作见帆软之使用FineTube将其他来源数据同步至简道云表单
当然直接导出csv再导入简道云更快,但要记得加一个data_id字段用来保存和简道云的数据互通标识

流程建立如下

在这里插入图片描述
生成记录和记录日志,是为了方便调试和记录日志,不影响流程
首先获取binlog日志
前面是数据源信息,对应要增量同步的表,解析开始时间是只解析该时间后的操作日志,最后三个字段名不要动
在这里插入图片描述
判断数据操作
若binlog中operation__参数是否等于I(即INSERT),则进入相应步骤节点
在这里插入图片描述

删改数据流程

数据标记,判断区分删改操作,虽然不会有新增数据,但稳妥点 标记为新增条件设为不成立就行
在这里插入图片描述
简道云推送数据,和全量推送一样,注意这里data_id(数据源和简道云数据互通的唯一标识,开头链接中有介绍)要设置
在这里插入图片描述

数据新增流程

简道云数据推送,将数据推送至简道云
和删改数据中的一样,但不用填data_id,因为data_id是简道云起的,新数据没有,后面的节点就是将data_id返回给源表
在这里插入图片描述

数据标记
在这里插入图片描述
插入更新,将简道云返回的_id写入源表的data_id字段
在这里插入图片描述
在这里插入图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值