一、sqoop同步oracle数据非clob字段:
要处理换行符,在sqoop脚本中,参数使用下面任意一个即可
#替换为空
--hive-delims-replacement ""
#删除
--hive-drop-import-delims
二、sqoop同步oracle数据clob字段
clob字段一般包含大量文本,必然包含换行符,使用上面参数没有作用,需要使用下面参数:
#指定clob列为String类型
--map-column-java CLOB列=String
例子如下:
oracle这张表可以看到YIWU字段为clob字段,打开明显有换行符
没有使用该参数,可以看到Hive这边从换行符位置开始全错位了。
使用该参数
可以看到结果已经正常
学习交流,有任何问题还请随时评论指出交流。