spark-sql中字段为bigint类型,但是查询用的字符串产生的bug

42 篇文章 3 订阅
12 篇文章 0 订阅
在一次工作实践中,记录了一次我的失误和坑。

首先我这个字段为bigint 类型。
但是我查询的时候 让该字段='123124565434567897654’这种类似的方法查询,发现查询的数据是有问题的。
在这里插入图片描述

发现查出来两条,但是前半部分是正常匹配的,只是后面的部分匹配有问题。

后来发现字段类型不匹配,用explain打印出来,发现两边都转成了double,才会导致这个问题。
统一一下字段类型之后数据就是正常的了。详细的问题就是隐式转换的问题了。

具体解释:bigint和string比较时会隐式地都转换成double,java中double的精度只有15-16位(double可以精确的表示小于2^52=4503599627370496的数字)。当数字超过精度的时候就会比较不准确,上面描述的现象。建议将string cast(c as bigint)再进行比较。

(1)任何整数类型都可以隐式地转换为一个范围更广的类型,如TINYINT可以转换成INT,INT可以转换BIGINT。
(2)所有整数类型、FLOAT和STRING类型都可以隐式地转换成DOUBLE。
(3)TINYINT、SMALLINT、INT都可以转换为FLOAT。
(4)BOOLEAN类型不可以转换为任何其它的类型。

这里是引用

  • 2
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值