搭建DMETL与使用

DMETL简介

达梦数据交换平台(简称DMETL)是在总结了众多大数据项目经验和需求并结合最新大数据发展趋势和技术的基础上,自主研发的通用的大数据处理与集成平台。

DMETL创新地将传统的ETL工具(Extract、Transform、Loading)与分布式大数据处理平台相结合,实现了对数据同步、数据处理以及数据共享交换的一站式支持,大幅度降低了用户使用各种hadoop以及flink进行大数据整合处理的技术门槛,是构建数据同步、数据交换、数据仓库以及数据中心等数据集成类应用的理想平台。
标准版安装配置

安装

调度器安装

./dmetl_scheduler.bin –i

在这里插入图片描述
在这里插入图片描述

管理器安装

./dmetl_manager.bin –i

在这里插入图片描述
在这里插入图片描述

原生执行器安装

./dmetl_native_executor.bin –i

在这里插入图片描述
启动执行器:
在 Linux 平台则执行 executor_native 目录下的 executor_native_start.sh 脚本文件即可。
启动调度器:
在 Linux 平台则执行 scheduler 目录下的 scheduler_start.sh 脚本文件即
启动管理器:
在 Linux 平台则执行 manager 目录下的 manager_start.sh 脚本文件

dmetl的使用

概述

DMETL的使用通常包括创建数据源、创建工程、设计转换与作业和配置调度等步骤,下面将以一个例子对这些过程进行演示。您也可以仿照例子中所述的步骤逐步进行操作,获取一次完整的使用体验,这将有助于您快速理解DMETL的使用方法。
1.创建数据源
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

2.设计工程

在DMETL首页,用户可点击【设计】下的【工程】按钮,进入工程管理页面,选中【工程】,右键选择【新建工程】,在弹出的新建工程对话框中,输入工程名与描述,即可完成工程的创建。
在这里插入图片描述
社区地址:https://eco.dameng.com

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值