DataX-Web说明
DataX集成可视化页面,选择数据源即可一键生成数据同步任务,支持RDBMS、Hive、HBase、ClickHouse、MongoDB等数据源,批量创建RDBMS数据同步任务,集成开源调度系统,支持分布式、增量同步数据、实时查看运行日志、监控执行器资源、KILL运行进程、数据源信息加密等。
前期准备
JDK(1.8以上,推荐1.8) Python(推荐Python2.7.X) datax Git IDEA
拉取代码
1.使用IDAEA拉取代码
点击idea主页上的 Get FromVCS 复制链接到URL (https://github.com/WeiYe-Jing/datax-web.git) 点击clone即可
拉取下来的项目结构如下:
修改配置
1.执行sql语句
语句在bin目录的db文件夹里面,复制里面代码在MySQL里执行
2.修改datax-admin下面的application.yml文件
路径如下:datax-admin/src/main/resources/application.yml
(1)修改配置源
(2)邮箱设置(可选可不选,不填可能会报错,随便填一个就行)
(3)配置mybatis-plus打印sql日志
3.修改datax-admin下面的application.yml文件
路径如下:datax-executor/src/main/resources/application.yml
(1)修改日志路径
(2)修改datax.job配置
4.启动项目
(1)启动datax-admin下面的DataXAdminApplication.java
详细路径如下:
datax-admin/src/main/java/com/wugui/datax/admin/DataXAdminApplication.java
(2)启动datax-executor下面的DataXExecutorApplication.java
详细路径如下:
datax-executor/src/main/java/com/wugui/datax/executor/DataXExecutorApplication.java
注意如果出现报错情况:
1.检查yml文件是否有配置错误
2.请检查JDK版本,目前只支持1.8以上版本
启动完成之后浏览器访问http://127.0.0.1:8080/index.html
默认账号密码为
账号:admin
密码:123456