浮点数精度补偿

场景描述:

1、整数除以一个数,取浮点值

2、浮点数值传递

以上都可能存在浮点数精度不够,四舍五入后,值存在误差的问题

 

解决:

#define POSITIVE_ZERO_VALUE                0.000001
#define NEGATIVE_ZERO_VALUE                (-0.000001)
#define COMPENSATION_VALUE                0.000005
#define ACCURACY_COMPENSATION(value)    ((double)value + COMPENSATION_VALUE * ((double)value >= POSITIVE_ZERO_VALUE ? 1 : \
                                            ((double)value <= NEGATIVE_ZERO_VALUE ? (-1) : 0.0)))

 

注意:

1、在Qt中,如果不判断0值,可能转换后,可能存在-0的情况

2、浮点值与0使用范围进行比较

3、解决方法中需注意宏的小数位数,根据不同场景做调整

4、float第6位小数准确,第7位不准;double第15位准确,第16位不准

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值