dataX二次开发
文章平均质量分 55
wenqingCoder
这个作者很懒,什么都没留下…
展开
-
datax开发hdfswriter写入目录不存在时自动创建
在使用datax导数据到hive分区表中,配置写入目录为hive表分区为dt=datax,如果不提前创建该分区,会报目录不存在错误,于是希望二次开发,在写入时检测目录不存在自动创建此分区目录原创 2021-12-16 14:53:53 · 3160 阅读 · 0 评论 -
datax开发hdfswriter支持parquet文件
因业务需求hive表需要使用parquet格式文件,但是datax导入时不支持parquet格式文件,于是手动开发hdfswriter原创 2021-12-16 11:58:16 · 2986 阅读 · 1 评论