以文本方式查看主题 - Foxtable(狐表) (http://foxtable.net/bbs/index.asp) -- 专家坐堂 (http://foxtable.net/bbs/list.asp?boardid=2) ---- 关于数据误差 (http://foxtable.net/bbs/dispbbs.asp?boardid=2&id=83882) |
-- 作者:shixu -- 发布时间:2016/4/19 9:43:00 -- 关于数据误差 我的表中的数据只进行了加减运算后,就出现了一些误差,这是什么原因。在不同精度数字变量间转换,是怎么约定的? |
-- 作者:大红袍 -- 发布时间:2016/4/19 9:53:00 -- 1、你可以把参与的所有的列,都设置成高精度小数;
2、不同精度的计算,丢失精度是肯定有的,你最后可以四舍五入,比如取几位小数。 [此贴子已经被作者于2016/4/19 9:52:53编辑过]
|