python 精度及位数处理

 

1、其他博文说明的用法:设置 decimal.getcontext().prec = 3

decimal.getcontext().prec = 3
print(decimal.Decimal('2.3') / decimal.Decimal('3'))  # 结果:0.767
print(decimal.Decimal('1.22222') * decimal.Decimal('0.01')) # 结果:0.0122
print(decimal.Decimal('1') / decimal.Decimal('3'))  # 结果:0.333

很明显,此种用法,decimal.getcontext().prec = 3 并不是保留3位小数,而是保留3位有效数字

2、用法二: round

print(round(1.626, 2)) # 结果:1.63
print(round(1.625, 2)) # 结果:1.62
print(round(1.624, 2)) # 结果:1.62
此种用法,在四舍五入的处理,并不能按照预想的 遇5进1. 

3、用法三:使用quantize,保留两位小数,则 设置为0.00

decimal.getcontext().rounding = decimal.ROUND_HALF_UP # 表示四舍五入
print(decimal.Decimal("1.625").quantize(decimal.Decimal('0.00')))

 

class NumUtil():

    # 字符串转为decimal
    @staticmethod
    def convertDecimal(strNum):
        if strNum == None:
            pass
        return decimal.Decimal(strNum)

    # 保留两位小数
    @staticmethod
    def convertDecimal2(strNum):
        if strNum == None:
            pass
        # 保留两位小数
        # decimal.getcontext().prec = 2 此种方式只是说保留几位有效数字,而非 小数
        decimal.getcontext().rounding = decimal.ROUND_HALF_UP
        return decimal.Decimal("1.625").quantize(decimal.Decimal('0.00'))

    @staticmethod
    def convertDecimalBit(num_str, bit):

        bit = 2 if bit == None or int(bit) < 0 else int(bit)
        _bit = "0."
        for x in range(bit):
            _bit += "0"

        num_str = '0.00' if num_str == None else num_str
        decimal.getcontext().rounding = decimal.ROUND_HALF_UP

        return decimal.Decimal(num_str).quantize(decimal.Decimal(_bit))

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值