中电科金仓KFSMC支持对数据进行分片校验功能介绍与使用说明

关键字:

KingbaseFlySync、KFSMC、电科金仓、数据校验、 分片校验

1.功能描述

中电科金仓数据同步管理平台KFSMC支持对数据进行分片校验,当单表数据量较多时可以选择进行分片校验,从而提升数据校验速度。

2.使用场景介绍

用于单表数据量较大的场景,通过在KFSMC校验参数中进行配置,其中用户可根据实际需求自行定义分片的数量。

3.配置使用方式介绍

3.1 全局分片(源端表需要有索引,录入的是每片的条数)

登录KFSMC所在机器,新建校验任务,选择普通校验后,点击高级参数,设置分片条数大小

图片.png

3.2 单表分片(针对无法全局分片的表或全局分片结果不均匀的表,录入的是总分片个数,优先使用整型、时间类型列)

登录KFSMC所在机器,新建校验任务,选择普通校验后,点击高级参数,设置分片条数大小
图片.png
图片.png
选择分片列,按照需求设置分片大小,点击确定
图片.png

4.使用示例

4.1 前置条件

假设有一张单表TABLE_DATETIME数据量较多,我们希望对该表进行分片校验,从而提升数据校验速度。

4.2 操作步骤

1)参考《Kingbase FlySync 安装部署手册》完成KFS同步链路以及KFSMC的安装部署。
2)登录KFSMC,按上文所述步骤建立单表分片检验任务和调度,随后对表TABLE_DATETIME进行分片校验。
图片.png

4.3 结果展示

1.分片校验结果展示:

图片.png
图片.png

从上图中分片校验结果图可以看出,选择分片校验后,KFSMC对TABLE_DATETIME分成了五片进行并行检验,因此该校验方法可应用于单表数据量较大的场景进行快速校验。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值