大数据学习——dataX工具部署和源码编译

为了做大数据项目数据抽取工作,开始学习dataX,尝试比较dataX(版本 3.0)与sqoop的功能与性能差异。以下教程包括:

下载dataX工具及简要使用、下载dataX源码尝试编译及遇到的问题、尝试改造开源项目dataX

一、下载dataX工具及简要使用

gitHub下载(在下面的README里,Quick Start栏中):https://github.com/alibaba/DataX

阿里云下载:http://datax-opensource.oss-cn-hangzhou.aliyuncs.com/datax.tar.gz

百度网盘备份:链接:https://pan.baidu.com/s/1gI89MiKtwFC0H4PCiInYPw 提取码:v9g5

操作说明参考gitHub上的README.md 

二、下载dataX源码尝试编译及遇到的问题

gitHub下载(版本可能会持续更新):https://github.com/alibaba/DataX

百度网盘备份:链接:https://pan.baidu.com/s/1gI89MiKtwFC0H4PCiInYPw 提取码:v9g5  

开发环境:win10 + IDEA + python2.7 + java JDK1.8

2.1 下载源码加载到IDEA

主要是找到pom.xml  打开IDEA,通过pom.xml先将project导入。

  • 2
    点赞
  • 14
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值