GBASE南大通用数据库分享：Teradata迁移到GBase 8a解决方案（3）

2023年，Teradata宣布退出中国市场，这必将给国内数据库行业及用户带来一定的影响。国产数据仓库的领先企业GBASE南大通用自主研发的GBase 8a MPP (GBase UP LDW)分布式逻辑数据仓库，已经完成了100余用户TeraData等国外数据仓库替换迁移。通过众多项目的实施，在替换Teradata产品方面，GBASE南大通用积累了丰富的实施经验，形成了一套完整的迁移实施方案，可快速复制推广，实现由teradata到GBase 8a的高精准迁移。

下面根据GBase 8a的迁移经验，对迁移方案进行阐述：

五、最后一步是数据准确性，数据稽核

数据稽核的最终目的是检验迁移的脚本和程序的正确性，采用的方法是通过比对原系统和迁移系统对相同数据的加工结果，通过结果是否一致来推断过程是否迁移的正确。

数据准确不等于完全相同，数据准确是指对比数据的结果在预期可接受的误差范围之内，在迁移项目中做到100%的运算结果完全相同有时是无法做到的，其可能原因包括：抽取前端数据的业务时间不同，不同数据库对计算结果的舍入和截取的规则不同，不同数据库对相同排序列值数据的排列顺序不一致，不同数据库对加载文件中的少量脏数据的处理机制不同等原因造成。

1、常用的稽核思路

自顶向下的稽核顺序：上层指标核对通过则可暂时不考虑底层的不一致问题

自底向上的错误排查顺序：出现不一致的上层指标需要利用血缘关系图从底层开始排查

2、数据稽核常用方法

总量稽核：count值、sum值、avg值对比

分量稽核：对表内各维度进行group by后对这个维度的一个指标值进行count、sum、avg核对

错误对比：在发现不一致的表时，将对比的表拉到一个环境上进行详细分析，如进行minus运算，找出差数据再进一步分析

稽核报告：稽核报告是稽核工作输出物，对数据一致性问题进行记录和分析，对之前解决的问题进行追溯，形成数据稽核工作常见问题的知识体系

关于GBase 8a

GBase 8a是GBASE南大通用自主研发的，面向海量数据查询分析应用领域的一款高性能国产分布式逻辑数据仓库，用于满足各个数据密集型行业日益增大的数据查询、数据统计、数据分析、数据挖掘和数据备份等数据存储、管理和处理需求，可用做数据仓库系统、BI系统和决策支持系统的承载数据库。产品主要应用在金融、电信、政企、能源、安全等拥有海量业务数据的行业。