吾爱破解 - 52pojie.cn

 找回密码
 注册[Register]

QQ登录

只需一步,快速开始

查看: 967|回复: 3
收起左侧

[求助] python decimal模块精度问题

[复制链接]
kafei000 发表于 2022-2-12 00:27


最近用到高精度计算,就用到了decimal模块,其他的都没问题,当很小的值保留成七位小数的时候,会转变为科学计数法,保留成六位小数都没问题
[Asm] 纯文本查看 复制代码
>>> from decimal import Decimal
>>> Decimal('0.0000000').quantize(Decimal('1.0000000'))  
Decimal('0E-7')
>>> Decimal('0.0000000').quantize(Decimal('1.000000'))
Decimal('0.000000')
>>> Decimal('0.0000001').quantize(Decimal('1.0000000'))
Decimal('1E-7')


求助大佬们, 如何将Decimal('0E-7')转变成Decimal('0.0000000')或者直接返回Decimal('0.0000000')

发帖前要善用论坛搜索功能,那里可能会有你要找的答案或者已经有人发布过相同内容了,请勿重复发帖。

PeppaPig 发表于 2022-2-12 01:46
print("{:.7f}".format(Decimal('0.0000001').quantize(Decimal('1.0000000'))))

免费评分

参与人数 1吾爱币 +2 热心值 +1 收起 理由
kafei000 + 2 + 1 谢谢@Thanks!

查看全部评分

无闻无问 发表于 2022-2-12 10:47
 楼主| kafei000 发表于 2022-2-12 11:21
无闻无问 发表于 2022-2-12 10:47
单精度浮点数有效位6位,超过6位也无意义…

所以我用decimal模块来进行高精度计算,
您需要登录后才可以回帖 登录 | 注册[Register]

本版积分规则

返回列表

RSS订阅|小黑屋|处罚记录|联系我们|吾爱破解 - LCG - LSG ( 京ICP备16042023号 | 京公网安备 11010502030087号 )

GMT+8, 2024-11-25 18:55

Powered by Discuz!

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表