precision

precision

文章 0 浏览 2

双浮点数?计算错误,使用 double

非常有趣的事情。找到方程结果的最简单的源代码:ax + b = 0。我想知道,当 double x = -13/12 = -1.000000 时和 双 x = -12/13= 0.000000; (对于 a…

舂唻埖巳落 2024-10-10 22:06:13 0 0

导轨精度误差

当我在 Rails 应用程序中运行此命令时: my_envelope.transactions.sum(:amount) 此 SQL 显示在日志文件中: SQL (0.3ms) SELECT SUM("transactions".…

萌能量女王 2024-10-09 22:12:53 0 0

Mathematica:“15 位 Sqrt[x] 得到 42”百万位数字的x”

我在 Mathematica 中这样做来计算 Sqrt[5]: a[0] = 2 a[n_] := a[n] = a[n-1] - (a[n-1]^2-5)/2/a[n-1] a[25] 与 Sqrt[5] 有多接近? N[Sqrt[5]-a[25…

孤独患者 2024-10-09 04:00:54 1 0

C# 中的任意精度小数

可能的重复: C# 中的大整数 C# 不带 java 的无限有效十进制数字(任意精度) 我在 Arbitrary precisiondecimals-in-c"&gtArbitrary precisiondecima…

烟柳画桥 2024-10-08 21:05:26 0 0

对于 C++ 来说,最好的(速度)任意精度库是什么?

我需要可用于 C++ 的最快库。我的平台是支持浮点的 x86 和 x86-64。…

爺獨霸怡葒院 2024-10-08 13:38:20 0 0

文本检索系统的精度值可以达到 100% 吗?

由于精度的公式为: retrieved_and_relevant/(retrieved_and_relevant+retrieved_and_irrelevant) 我想知道文本检索系统中的精度值是否会不同于 100%…

浪菊怪哟 2024-10-08 08:48:28 0 0

MATLAB 中大矩阵的行列式

从一个模拟问题中,我想在 MATLAB 中计算 1000x1000 量级的复数方阵。由于这些值是指贝塞尔函数的值,因此矩阵一点也不稀疏。 由于我对行列式相对于某…

木槿暧夏七纪年 2024-10-06 00:20:32 1 0

双精度与浮点

我的代码中有一个 pi 常量: const float PI = acos(-1) 将其声明为 double 会更好吗?本网站上另一个问题的答案说浮点运算并不完全精确,我希望常数…

月下客 2024-10-05 08:28:49 1 0

C# int 存储在双精度“==”中精度问题

这是简化的代码: int i = 1 double a = i double b = i 是否保证 a == b 为 true?…

初心 2024-10-04 11:49:58 0 0

为什么这个两个双打的简单计算不准确?

可能的重复: C# (4):双精度减双精度问题 &lt /p&gt 86.25 - 86.24 = 0.01 一般来说,我认为上面的说法是正确的,对吗? 但是,如果我输入此内容 do…

花想c 2024-10-04 10:02:49 1 0

处理大于最大小数值的数字

我正在处理前 26 个素数的乘积。这需要超过 52 位的精度,我相信这是双精度数可以处理的最大值,并且超过了十进制可以提供的 28-29 位有效数字。那么…

风情万种。 2024-10-04 02:29:17 1 0

Actionscript数据输入问题

&lts:TextInput id="bill" x="150" y="17" width="223" borderColor="#FFFBFB" borderVisible="false" color="#EF4315" contentBackgroundColor="#10…

娇柔作态 2024-10-04 02:03:30 0 0

SQL Server 2008 TIME的精度可以降低到只有小时和分钟吗?

在 SQL Server 2008 中,time 数据类型具有可选的精度参数(默认值为 7)。通过这个,您可以控制存储和显示多少个小数位。 DECLARE @time time(3) SET…

梦归所梦 2024-10-03 18:33:19 1 0

管理 C++ 的规则是什么?单双精度混合计算?

例如,这些变量: result (double) a (double) b (float) c (float) d (double) 一个简单的计算: result = a * (b + c) * d 如何以及何时转换类型以…

弱骨蛰伏 2024-10-03 15:26:34 0 0

在 MATLAB 中,默认情况下变量真的是双精度吗?

这个问题源于我在进一步调查这个问题后注意到的一些奇怪的事情...... 我默认情况下,始终将 MATLAB 变量理解为双精度。因此,如果我要声明一个小数点…

月下伊人醉 2024-10-03 13:35:02 1 0
更多

推荐作者

qq_FjTq5B

文章 0 评论 0

18273202778

文章 0 评论 0

WordPress小学生

文章 0 评论 0

〃温暖了心ぐ

文章 0 评论 0

迷乱花海

文章 0 评论 0

niuniu

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文