論文の概要: Parametric and Multivariate Uncertainty Calibration for Regression and
Object Detection
- arxiv url: http://arxiv.org/abs/2207.01242v1
- Date: Mon, 4 Jul 2022 08:00:20 GMT
- ステータス: 処理完了
- システム内更新日: 2022-07-06 01:21:59.612549
- Title: Parametric and Multivariate Uncertainty Calibration for Regression and
Object Detection
- Title(参考訳): 回帰・物体検出のためのパラメトリック・多変量不確かさ校正
- Authors: Fabian K\"uppers, Jonas Schneider, Anselm Haselhoff
- Abstract要約: 一般的な検出モデルでは,観測誤差と比較して空間的不確かさが過大評価されている。
実験の結果, 簡便な等速回帰補正法は, 良好な校正不確実性を実現するのに十分であることがわかった。
対照的に、後続のプロセスに正規分布が必要な場合、GP-Normal再校正法が最良の結果をもたらす。
- 参考スコア(独自算出の注目度): 4.630093015127541
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Reliable spatial uncertainty evaluation of object detection models is of
special interest and has been subject of recent work. In this work, we review
the existing definitions for uncertainty calibration of probabilistic
regression tasks. We inspect the calibration properties of common detection
networks and extend state-of-the-art recalibration methods. Our methods use a
Gaussian process (GP) recalibration scheme that yields parametric distributions
as output (e.g. Gaussian or Cauchy). The usage of GP recalibration allows for a
local (conditional) uncertainty calibration by capturing dependencies between
neighboring samples. The use of parametric distributions such as as Gaussian
allows for a simplified adaption of calibration in subsequent processes, e.g.,
for Kalman filtering in the scope of object tracking.
In addition, we use the GP recalibration scheme to perform covariance
estimation which allows for post-hoc introduction of local correlations between
the output quantities, e.g., position, width, or height in object detection. To
measure the joint calibration of multivariate and possibly correlated data, we
introduce the quantile calibration error which is based on the Mahalanobis
distance between the predicted distribution and the ground truth to determine
whether the ground truth is within a predicted quantile.
Our experiments show that common detection models overestimate the spatial
uncertainty in comparison to the observed error. We show that the simple
Isotonic Regression recalibration method is sufficient to achieve a good
uncertainty quantification in terms of calibrated quantiles. In contrast, if
normal distributions are required for subsequent processes, our GP-Normal
recalibration method yields the best results. Finally, we show that our
covariance estimation method is able to achieve best calibration results for
joint multivariate calibration.
- Abstract(参考訳): 物体検出モデルの信頼性の高い空間不確実性評価は特に興味深く、近年の研究の対象となっている。
本稿では,確率回帰タスクの不確実性校正に関する既存の定義について概説する。
我々は,共通検出ネットワークのキャリブレーション特性を検査し,最先端再校正法を拡張する。
本手法では,パラメトリック分布を出力として得るガウス過程(gp)リカバリレーションスキームを用いる(ガウス分布やコーシー分布など)。
GP再校正の使用により、隣接するサンプル間の依存関係をキャプチャすることで、局所的な(条件付き)不確実性の校正が可能になる。
ガウス分布のようなパラメトリック分布を用いることで、後続のプロセスにおけるキャリブレーション(例えば、オブジェクト追跡のスコープにおけるカルマンフィルタリング)の適応を単純化することができる。
さらに,GP再校正方式を用いて,物体検出における位置,幅,高さなどの出力量間の局所的相関を保温後に導入できる共分散推定を行う。
多変量とおそらく相関関係のあるデータの合同校正を測定するために、予測分布と基底真理との間のマハラノビス距離に基づく量子量校正誤差を導入し、基底真理が予測量子量内にあるかどうかを判定する。
実験では,観測誤差と比較して空間的不確かさを過大評価する共通検出モデルを示す。
簡易な等方性回帰復調法は, キャリブレーションによる不確実性定量化を実現するのに十分であることを示す。
対照的に、後続のプロセスに正規分布が必要な場合、GP-Normal再校正法が最良の結果をもたらす。
最後に, 共分散推定法により, 連立多変量キャリブレーションの最適キャリブレーション結果が得られることを示す。
関連論文リスト
- Orthogonal Causal Calibration [55.28164682911196]
我々は、任意の損失$ell$に対して、任意の因果パラメータのキャリブレーション誤差$theta$の一般的な上限を証明した。
我々は、因果校正のための2つのサンプル分割アルゴリズムの収束解析に境界を用いる。
論文 参考訳(メタデータ) (2024-06-04T03:35:25Z) - Consistent and Asymptotically Unbiased Estimation of Proper Calibration
Errors [23.819464242327257]
本稿では,全ての適切な校正誤差と精錬項を一貫した推定を可能にする手法を提案する。
ニューラルネットワークにおける情報単調性を意味するf-分節と精製の関係を実証する。
本実験は,提案した推定器のクレーム特性を検証し,特に関心のキャリブレーション誤差によって,ポストホックキャリブレーション法の選択が決定されるべきであることを示唆した。
論文 参考訳(メタデータ) (2023-12-14T01:20:08Z) - Calibration by Distribution Matching: Trainable Kernel Calibration
Metrics [56.629245030893685]
カーネルベースのキャリブレーションメトリクスを導入し、分類と回帰の両方で一般的なキャリブレーションの形式を統一・一般化する。
これらの指標は、異なるサンプル推定を許容しており、キャリブレーションの目的を経験的リスク最小化に組み込むのが容易である。
決定タスクにキャリブレーションメトリクスを調整し、正確な損失推定を行ない、後悔しない決定を行うための直感的なメカニズムを提供する。
論文 参考訳(メタデータ) (2023-10-31T06:19:40Z) - Distribution-Free Model-Agnostic Regression Calibration via
Nonparametric Methods [9.662269016653296]
予測モデルの量子化を特徴付けるための個別キャリブレーションの目的について考察する。
既存の方法はほとんどなく、個々のキャリブレーションに関して統計的な保証が欠如している。
基礎となる予測モデルに依存しない単純な非パラメトリックキャリブレーション法を提案する。
論文 参考訳(メタデータ) (2023-05-20T21:31:51Z) - Sharp Calibrated Gaussian Processes [58.94710279601622]
キャリブレーションされたモデルを設計するための最先端のアプローチは、ガウス過程の後方分散を膨らませることに依存している。
本稿では,バニラガウス過程の後方分散にインスパイアされた計算を用いて,予測量子化を生成するキャリブレーション手法を提案する。
我々のアプローチは合理的な仮定の下で校正されたモデルが得られることを示す。
論文 参考訳(メタデータ) (2023-02-23T12:17:36Z) - A Consistent and Differentiable Lp Canonical Calibration Error Estimator [21.67616079217758]
ディープニューラルネットワークは校正が不十分で、自信過剰な予測を出力する傾向がある。
ディリクレ核密度推定に基づく低バイアス・トレーニング可能な校正誤差推定器を提案する。
提案手法はカーネルの自然な選択であり,他の量の一貫した推定値を生成するのに利用できる。
論文 参考訳(メタデータ) (2022-10-13T15:11:11Z) - Localized Calibration: Metrics and Recalibration [133.07044916594361]
完全大域キャリブレーションと完全個別化キャリブレーションのギャップにまたがる細粒度キャリブレーション指標を提案する。
次に,局所再校正法であるLoReを導入し,既存の校正法よりもLCEを改善する。
論文 参考訳(メタデータ) (2021-02-22T07:22:12Z) - Unsupervised Calibration under Covariate Shift [92.02278658443166]
ドメインシフト下でのキャリブレーションの問題を導入し、それに対処するための重要サンプリングに基づくアプローチを提案する。
実世界のデータセットと合成データセットの両方において,本手法の有効性を評価し検討した。
論文 参考訳(メタデータ) (2020-06-29T21:50:07Z) - Calibration of Neural Networks using Splines [51.42640515410253]
キャリブレーション誤差の測定は、2つの経験的分布を比較します。
古典的コルモゴロフ・スミルノフ統計テスト(KS)にインスパイアされたビンニングフリーキャリブレーション尺度を導入する。
提案手法は,KS誤差に対する既存の手法と,他の一般的なキャリブレーション手法とを一貫して比較する。
論文 参考訳(メタデータ) (2020-06-23T07:18:05Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。