在FDL 4.1.5之前的版本中,由于定时任务不能自动获取源表结构变化,业务系统的修改无法及时的传递到数仓侧,开发人员要花费大量的时间手动维护,甚至半夜都要被叫起来修复bug。并且在频繁更改数据库结构的过程中很容易出现人为错误。
解决方案-定时任务DDL同步
FineDataLink提供的定时任务DDL同步功能一次性解决了上述问题。当IT人员进行定时任务开发时,FDL能够提示来源端数据表的 DDL 变化,并且将变化通知给指定用户。同时用户可以直接在任务中对目标表进行字段处理,更新目标表结构。
1、源表结构变化监测
开发人员可以进入「数据同步」节点,勾选「源表结构变化监测」选项,节点每次执行时会自动获取来源端表结构,并与当前节点配置的表结构进行比对,判断出源表结构变化。
用户可在「任务控制」中设置「结果通知」,即可在变化后自动通知给指定用户,用户即可手动进行任务调整。
2、更新字段映射
开发人员在进行数据同步时,若数据来源是SQLServer、Oracle、PostgreSQL或MySQL ,当来源表结构变化时FDL会提示用户「更新字段映射」。
3、更新目标表
当数据去向选择「已存在表」时,若来源表字段相较之前有变化,开发人员可以点击「更新目标表」对目标表进行调整。「更新目标表」支持选择已有目标表字段或手动输入新字段,确认后即可生成相应的DDL语句并执行。
定时任务DDL同步帮助开发人员从频繁的手动更新数据库结构中解放出来,节省了时间,提高了工作效率。
同时,DDL同步的自动化过程大大减少了人为错误的可能性,有助于维护数据的一致性。
了解更多数据仓库与数据集成关干货内容请关注>>>FineDataLink官网
免费试用、获取更多信息,点击了解更多>>>体验FDL功能
往期推荐: