sqoop import decimal类型为NULL处理办法

9 篇文章 0 订阅

1、添加CatalogOptions=0;NumberPrecisionScale=1

sqoop import \
 --connect 'jdbc:mysql://ip:port/db_qyfxpt?useUnicode=true&characterEncoding=UTF-8&useSSL=false&allowPublicKeyRetrieval=true&serverTimezone=GMT%2b8&tinyInt1isBit=false&CatalogOptions=0;NumberPrecisionScale=1' \
 --username root \
 --password '123456' \
 --query "select *  from tyc_stg_branch where 1=1  and \$CONDITIONS " \
 --hive-import  \
 --as-textfile \
 --null-string '\\N' \
 --null-non-string '\\N' \
 --hive-overwrite   \
 --delete-target-dir  \
 --target-dir /user/hive/warehouse/qyfxpt_src/src_tyc_branch \
 --hive-database  qyfxpt_src \
 --hive-table src_tyc_branch \
 --fields-terminated-by '|' \
 --hive-delims-replacement "" \
 --hive-partition-key batch_no \
 --hive-partition-value 20211223 \
 -m 1

2、在Sqoop执行语句中,添加下面的参数
MySQL表中,对应的列的类型为decimal(10,2)。Sqoop会把它转为Hive的double类型,导致精度丢失。

–map-column-hive your_column=‘DECIMAL(10%2C2)’

3、query中转换

CAST((s1 * s2) as DECIMAL(38,d)) * s3

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值