datax-web
大数据面试宝典
这个作者很懒,什么都没留下…
展开
-
datax-web进行本地代码调试
如何进行本地对datax-web项目进行Debug 先来思考一个问题:为什么要在本地进行Debug? 答: 但凡是结果几天代码的同学都应该明白,我们写完代码之后打成jar包扔到linux服务器中去跑,最多也就看看错误日志出现在了什么地方,但是如果在本地的IDE中进行debug就可以快速的定位到问题! 实操一下 1.将最新的dev分支代码拉到本地 2.修改配置文件 admin分支下的bootstrap.properties文件 配置本地datax的地址 3.启动项目 首先启动admin模块下的启动类 然原创 2020-08-10 17:41:33 · 1660 阅读 · 0 评论 -
大数据同步组件Datax5分钟快速入门
Datax使用指南 DataX是什么? DataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括 MySQL、SQL Server、Oracle、PostgreSQL、HDFS、Hive、HBase、OTS、ODPS 等各种异构数据源之间高效的数据同步功能。 DataX本身作为数据同步框架,将不同数据源的同步抽象为从源头数据源读取数据的Reader插件,以及向目标端写入数据的Writer插件,理论上DataX框架可以支持任意数据源类型的数据同步工作。同时DataX插件体系作为一套生态系统,原创 2020-08-10 15:06:13 · 660 阅读 · 0 评论