Soop从postgresql抽取数据到HDFS遇到的问题总结
1.前期没配置好可能会出现,hdfs写入失败缺少驱动jar导致的无法正常运行命令2. 就是关于pg字段类型的问题,因为某张表里有JSON格式,导致报错NullPotionterException解决办法:通过query select 查询进行解决--query 'SELECT 字段名::text FROM 表名 '可能会报错,sql需要添加where条件后跟,来实现并行运行mr的功能,
原创
2023-08-05 16:00:31 ·
234 阅读 ·
2 评论