datax
文章平均质量分 83
yostkevin
热爱编程,喜欢各种球类运动。
展开
-
datax二次开发rdbms插件 支持直接插入hive表
目录一. 背景二次开发思路二次开发步骤2.1 上传hive驱动到rdbmsReader、rdbmsWriter插件的lib目录2.2 修改plugin.json配置文件2.3 从git clone源码 并在最外层pom.xml注释掉其他组件,只保留 rdbmswriter模块2.4 原码测试能否编译打包2.5 修改源码2.5.1 新增CommonRdbmsWriterOverride.java类(替代CommonRdbmsWriter类)2.5.2 修改Rdbms..原创 2021-08-08 17:41:35 · 94 阅读 · 0 评论 -
datax3.0配置例子
mysql2mysql.sh[root@azkaban testDB]# cat mysql2mysql.sh #获取本次执行开始时间incre_stime=`date -d "today" +"%Y-%m-%d %H:%M:%S"`#获取源表信息source_table_info="192.168.108.140:3306-jiakesong-person"#获取目的表信息d...原创 2019-02-12 22:04:12 · 1043 阅读 · 0 评论 -
datax --postgresql使用
datax1.json{ "job": { "setting": { "speed": { "byte":1048576, "channel":"4" } }, "content": [原创 2019-02-12 22:05:52 · 12301 阅读 · 3 评论