2024年4月10日
单精度浮点数计算误差与消减方法
摘要： 单精度浮点数计算误差与消减方法 在使用浮点数计算时，尤其是在使用AI框架的过程中，我们往往使用的是float32单精度浮点数，这也跟GPU的硬件架构有关系。但是使用单精度浮点数的过程中，务必要考虑到累加误差和大数吃小数的问题，这两个问题在长时间的迭代过程中，有可能会直接导致计算结果就是错误的。而如果在计算的过程中使用Kahan求和公式，则可以避免这种大数吃小数的问题。Kahan求和公式的本质，就是把大数和小数分开进行计算，这样可以一定程度上达到接近于float64双精度浮点数的运算精度。 阅读全文
posted @ 2024-04-10 16:54 DECHIN 阅读(583) 评论(2) 推荐(2) 编辑