首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >在Progress 4GL中,有没有一种方法可以将字符串转换为小数而不损失任何精度?

在Progress 4GL中,有没有一种方法可以将字符串转换为小数而不损失任何精度?
EN

Stack Overflow用户
提问于 2021-09-03 23:19:12
回答 4查看 159关注 0票数 0

假设我需要将字符变量"0.0000000001“转换为小数。但如果我写出以下逻辑:

代码语言:javascript
复制
define variable tinyChar as character initial "0.0000000001" no-undo.
define variable tinyNum as decimal no-undo.

assign tinyNum = decimal(tinyChar).

display tinyNum.

它产生这样的结果:

代码语言:javascript
复制
0.00

因此,这肯定不是解决方案,截断也只会删除我试图保留的数据。有人知道如何保持小数的精确度吗?它不一定要在这里到第一百亿位是如此疯狂的情况,但至少有7或8个数字的精度将有助于我的问题。

EN

回答 4

Stack Overflow用户

发布于 2021-09-07 14:12:55

变量( DEFINE VARIABLE语句)缺省为最多10位小数,因此您不需要实际声明精度。

您的问题实际上是显示格式与内部数据表示和精度解耦(对于许多其他字段和可变属性,如字符串宽度,也是如此)。

这是一个特性。但对于刚接触OpenEdge的人来说,这是一个经常被绊倒的问题。通常认为显示格式限制了字段或变量的存储。事实并非如此。(对于任何使用SQL访问数据的人来说,这非常令人恼火。)

您可以像Mike指出的那样,通过更改定义变量来更改变量的默认格式,也可以在任何单独的显示中覆盖该格式。

因此,对代码所需的最小更改是:

代码语言:javascript
复制
define variable tinyChar as character initial "0.0000000001" no-undo.
define variable tinyNum as decimal no-undo.

assign tinyNum = decimal(tinyChar).

display tinyNum format "9.9999999999".

无论显示格式如何,您可能对该变量进行的任何计算都将使用全部10位小数。

在数据库模式(而不是变量)中定义的小数字段默认为2位小数。您可以在创建它们时进行更改。

分配给小数字段或变量的计算值将四舍五入为定义的精度。

票数 2
EN

Stack Overflow用户

发布于 2021-09-04 00:01:36

根据doc1,DECIMAL类型最多存储10位小数。如果你有更多的值,我想它会截断这个值。

1

票数 1
EN

Stack Overflow用户

发布于 2021-09-04 04:18:17

定义DECIMAL变量时,请尝试使用DECIMALS和FORMAT选项:

代码语言:javascript
复制
define variable tinyChar as character initial "0.0000000001" no-undo.
define variable tinyNum  as decimal                          no-undo
            DECIMALS 10 FORMAT "9.9999999999".

assign tinyNum = decimal(tinyChar).

display tinyNum.
票数 1
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/69051360

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档