达梦数据交换平台(简称DMETL)是在总结了众多大数据项目经验和需求并结合最新大数据发展趋势和技术的基础上,自主研发的通用的大数据处理与集成平台。
DMETL创新地将传统的ETL工具(Extract、Transform、Loading)与分布式大数据处理平台相结合,实现了对数据同步、数据处理以及数据共享交换的一站式支持,大幅度降低了用户使用各种hadoop以及flink进行大数据整合处理的技术门槛,是构建数据同步、数据交换、数据仓库以及数据中心等数据集成类应用的理想平台。
安装前准备工作:
1)提前部署DM8单机版数据库,作为DMETL系统的元数据库使用;
2)上传ETL安装包到相关目录下,解压并赋予执行权限。
DMETL标准版图形化安装配置
1)调度器安装
执行./dmetl5_scheduler_linux.x86_64.bin
2)管理器安装
执行./dmetl5_manager_linux.x86_64.bin
3)原生执行器安装
执行./dmetl5_native_executor_linux.x86_64.bin
4)启动与停止
1)调度器启动与停止
1.scheduler_start.sh:以命令行的方式启动调度器;
2.scheduler_stop.sh:通知调度器停止执行;
3.scheduler_service_start.sh:启动调度器操作系统服务;
4.scheduler_service_stop.sh:停止调度器操作系统服务;
5.scheduler_service_restart.sh:重启调度器操作系统服务。
2)原生执行器启动与停止
1.executor_native_start.sh:以命令行的方式启动原生执行器;
2.executor_native_stop.sh:通知原生执行器停止执行;
3.executor_native_service_start.sh:启动原生执行器操作系统服务;
4.executor_native_service_stop.sh:停止原生执行器操作系统服务;
5.executor_native_service_restart.sh:重启原生执行器操作系统服务。
3)管理器启动与停止
1.manager_start.sh:以命令行的方式启动管理器;
2.manager_stop.sh:通知管理器停止执行;
3.manager_service_start.sh:启动管理器操作系统服务;
4.manager_service_stop.sh:停止管理器操作系统服务;
5.manager_service_restart.sh:重启管理器操作系统服务。
达梦数据交换平台启动成功
5)DMETL工具使用
可以在DMETL工具的首页帮助进行查看手册深入学习。
达梦技术社区:https://eco.dameng.com