DataX
佛祖保佑无BUG
这个作者很懒,什么都没留下…
展开
-
【转载】Datax限速bug
转载自(侵删):https://zhmin.github.io/2018/12/16/datax-ratelimiter-bug/Datax 限速原理使用官方文档并没有写到怎么配置限速,通过观察源码才得知,需要配置core.transport.channel.speed.byte或core.transport.channel.speed.record值。这两个值是指定每个channel的速度。注意job.setting.speed.byte和job.setting.speed.record也是指定速度转载 2020-07-09 10:02:31 · 3332 阅读 · 0 评论 -
DataX踩坑指南
1.编码格式导致读写乱码Win10的文件默认GBK格式,Mac的文件默认UTF-8解决办法:使用DataX导入导出数据时reader和writer里要注明文件的编码格式,编码格式错误会导致类型报错,或者导出的数据出现乱码。2.用csv文件导入导出出现脏数据问题手动编辑的xls文件,无论数据是否为空,中间都要加上分隔符,否则会出现索引越界的问题解决办法:补充分隔符,或者使用办公软件编辑excel文件<-未完待续,持续补充->有遇到比较奇葩的问题欢迎补充一起探讨~...原创 2020-09-17 16:36:15 · 1844 阅读 · 5 评论