clickhouse 条件语句内decimal除0报错处理

clickhouse decimal类型除0异常

最近使用clickhouse做一个报表页面出现一个问题。

SELECT
    sum( impressions) impressions,
    sum( clicks ) clicks,
    if(impressions>0,clicks/impressions,0) clickRate,
    sum( cost ) cost,
    if(clicks>0, cost/clicks,0) clickCost
FROM
    amazon_ad_report_campaign
GROUP BY campaign_id
HAVING campaign_id in (214011130363);

出现如下报错

There is no supertype for types Decimal(38, 2), Float64 because some of them have no lossless conversion to Decimal

意思就是Decimal 和Float类型这间不能直接进行转换

在这里插入图片描述

错误原因在 if(clicks>0, cost/clicks,0) clickCost 这里

于是我单独对这个sql进行测试

select toDecimal32(0,2) as cost,toInt64(0) as clicks , if(clicks>0, cost/clicks,0) clickCost;
-- Exception: Division by zero
-- Decimal除零会异常

实际上按理说 上面不会执行到 cost/clicks,因此不会触发Division by zero才对。

条件运算符(如果/条件/三元)惰性计算问题

条件运算符(如果/条件/三元)始终计算所有分支这里给出了部分解释。

目前,惰性计算仅适用于纯常量,不适用于常量表达式

如 SELECT 1 ? 0 : 1 % 0 不会执行1%0

而 SELECT 1>0 ? 0 : 1 % 0 则会执行 1%0

也就是说 如果条件函数中条件不是表达式,那么其实每个分支都会被执行,但是只是返回正确分支得数据。

NaN(非数据)和Inf(无穷)和允许除零数据

在这里插入图片描述

实际上clickhouse 有定义NaN(非数据)和Inf(无穷)两种数据,允许计算时除数为0.

select toDecimal32(0,2) as cost,toInt64(1) as clicks , if(clicks>0, cost/clicks,0) clickCost;
-- 没有异常
-- 0.00,1,0.00
select toFloat64(1.0)/0;
-- 可以执行 值为 ∞
select toInt64(1)/0;
-- 可以执行 值为 ∞
select toDecimal32(2,0)/0;
-- 执行异常 Exception: Division by zero

测试部分数据除0,发现数字类型中Decimal会报错,其他数字类型 int,float式可以除0.

个人对decimal除0处理方案

因此对应decimal除0可以有两种处理方案(个人方案)

方案1:避免除0

select toDecimal32(0,2) as cost,toInt64(1) as clicks  ,  divide(cost,if(clicks>0,clicks,toInt64(9223372036854775807))) clickCost
-- 这种将被除数设置为很大,使得出的结果接近为0

方案2:转换类型

对于计算精度要求不高的,可以将 Decimal转换为 float类型进行计算

select toDecimal32(0,2) as cost,toInt64(1) as clicks  ,
       if(clicks>0,divide(toFloat64(cost),clicks),0) clickCost
  • 1
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
回答: 当在Hive中查询decimal类型字段时报错,可能是由于以下原因导致的。首先,Hive中的decimal字段默认精度为0,如果不指定小数点,数据将被四舍五入。例如,0.82在Hive中会变成1。因此,在建表时最好指定精度,如decimal(10,2)。\[1\]其次,当使用Sqoop导出数据时,需要注意设置--input-null-string '\\N'和--input-null-non-string '\\N'这两个参数。因为Hive中的null默认是\N,而Sqoop在导出数据时会解析\N。如果目标关系型数据库中的表字段不是string类型,就会报错。通过设置这两个参数,Sqoop会知道\N表示null,而不会将其解析为字符。\[2\]最后,如果在修改了字段类型后,表的schema发生了变化,而之前的分区仍然使用旧的schema,就会导致表和分区的schema不一致,从而导致select报错。在这种情况下,需要更新分区的schema以与表的schema保持一致。\[3\] #### 引用[.reference_title] - *1* *2* [Hadoop记录——hive中的decimal字段,shell的数据类型以及sqoop导出空string报错](https://blog.csdn.net/chenKFKevin/article/details/53199925)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insertT0,239^v3^insert_chatgpt"}} ] [.reference_item] - *3* [hive字段类型修改问题总结](https://blog.csdn.net/qq_36302506/article/details/117091191)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insertT0,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值