【IDL】判断双精度变量是否EQ
在任何语言中,数据的精度问题都会存在。比如在IDL中,就存在以下现象。
IDL> a = 2.3 + 0.08
IDL> print, a
2.38000
IDL> print, a eq 2.38
0
IDL> a = 2.38
IDL> b = 2.38D
IDL> print, a eq b
0
查看了一些网上的搜索结果,大多数人的解决方法都是通过判断两者之差是否小于一个极小值,从而判断是否相等。
另附上一个简单解决方法:
其实在IDL里,可以通过把双精度变量转换成字符串类型,然后判断。
;这里的变量均为浮点型
IDL> a = 2.3 + 0.08
IDL> print, a eq 2.38
0
IDL> print, string(a) eq string(2.38)
1
;对于双精度
IDL> a = 2.3 + 0.08D
IDL> help, a
A DOUBLE = 2.3800000
IDL> print, string(a) eq string(2.38)
0
IDL> print, string(a) eq string(2.38D)
1
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 10年+ .NET Coder 心语 ── 封装的思维:从隐藏、稳定开始理解其本质意义
· 地球OL攻略 —— 某应届生求职总结
· 提示词工程——AI应用必不可少的技术
· 字符编码:从基础到乱码解决
· SpringCloud带你走进微服务的世界