datax数据同步:Mysql 2 Mysql 的简单实践(本地windows)(含几个编译报错的解决方法)

本文详细介绍了在Windows环境下使用DataX进行MySQL到MySQL数据同步的步骤,包括环境配置、DataX代码编译过程中的问题解决,以及如何创建JSON配置文件实现数据同步。同时,文中提到了在reader和writer配置中需要注意的细节。
摘要由CSDN通过智能技术生成

本文基于windows环境使用datax,Linux环境下酌情参考。

开发工具与环境参数:

        Windows环境:IDEA、JDK1.8、Maven3.6.0、Python 2.7.16

        Linux环境:MySQL5.7.25(部署在两台虚拟机)


一、环境准备

windows版的Python的安装和环境参数配置,参考 https://www.runoob.com/python/python-install.html,很详细。jdk和maven的不做赘述。


二、datax编译

从 https://github.com/alibaba/DataX 将代码下载到本地

datax代码pom文件的版本参数为1.6或1.7,根据本地的jdk环境,全部修改为实际的版本号。

通过maven打包命令(跳过test测试)

mvn -U clean package assembly:assembly -Dmaven.test.skip=true

2.1 报错:Failed to execute goal on project odpsreader: Could not resolve dependencies for project com.alibaba.datax:odpsreader:jar:0.0.1-SNAPSHOT: Could not find artifact com.alibaba.external:bouncycastle.provider:jar:1.38-jdk15 in nexus  -> [Help 1]

  • 0
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值