Core Concepts
浮動小数点数の使用から生じる数値的不正確さを評価し、精度を推定するアルゴリズムとデータ構造を紹介します。
Abstract
数値計算における不正確さの影響とその推定方法について説明。
計算結果の精度が計算方法に依存する例示。
数値演算における誤差伝播の影響と相対誤差の推定方法。
大規模な数値配列やニューラルネットワークトレーニングにおけるデジタルノイズの問題点。
精度推定アルゴリズムの重要性と提案された解決策。
演算関数ごとの精度推定方法や条件数に基づくエラー伝播率など、具体的な手法について述べられています。
Stats
IEEE 754で記述された浮動小数点数を使用した数字的不正確さから生じるエラーをカウントするアルゴリズムとデータ構造を導入します。
Quotes
"Computations are themselves inexact."
"Accuracy of the result depends on way of computation frequently."
"Calculations with huge arrays of numbers and arithmetic operations involved usually lead to high accumulated digital noise in the result."