【DMETL5】批量流程向导功能详解

最新推荐文章于 2023-08-18 10:40:26 发布

cccfffbbb

最新推荐文章于 2023-08-18 10:40:26 发布

阅读量303

点赞数

文章标签：数据库 database etl工程师

本文链接：https://blog.csdn.net/cccfffbbb/article/details/124840501

版权

DMETL5的批量流程向导功能简化了ETL工作，通过模板快速创建多个转换。本文详细介绍了如何配置批量生成向导，包括选择流程类型、配置节点信息和执行转换。虽然存在限制，但能显著提高效率，尤其适用于配置相似流程。

摘要由CSDN通过智能技术生成

操作系统版本：Windows 10

DMETL5版本：V5.0.3.05-Build(2021.12.20-104448)单机版

DM8源端库：本机Windows实例，端口5236

DM8目的库：本机Windows实例，端口5238

一、功能介绍

在我们使用ETL工具时，经常会需要配置许多简单的转换，这些转换使用的组件很少，但是需要配置的表很多，如果一个一个的配置就非常的麻烦，全都是重复的没技术含量的操作。这个时候，批量流程向导功能应运而生，专门解决这个问题。
DMETL提供了基于模版的批量生成流程工具，使用批量生成工具可以帮助用户快速生成一系列的转换或者作业，从而避免用户手工去创建多个配置相似流程的繁琐过程。
批量流程向导主要支持单个独立属性的替换，对于节点前后有依赖传递的属性并不支持。所以有些组件虽然可以复制（比如数据清洗转换），但是内部配置不能更改，可能出现生成的转换执行报错的问题。
批量生成的转换可以直接执行无需再进行修改，帮助ETL工作者节省大量时间精力。

使用批量流程向导，相当于是将模板的转换名称，数据集等进行相应的更换，因此需要用到许多变量及函数，来告诉ETL工具如何替换相应转换名称及数据集等。灵活运用这些函数及变量，可以使批量流程向导实现更批量生成更复杂的转换。下面仅列举常用变量及函数，更多变量及函数请参考“DMETL用户手册“的”附录二“，”附录三“章节

2. 批量创建函数

关注