論文の概要: Sharp Calibrated Gaussian Processes
- arxiv url: http://arxiv.org/abs/2302.11961v2
- Date: Thu, 16 Nov 2023 19:14:56 GMT
- ステータス: 処理完了
- システム内更新日: 2023-11-22 20:26:24.542692
- Title: Sharp Calibrated Gaussian Processes
- Title(参考訳): シャープ校正ガウス過程
- Authors: Alexandre Capone, Geoff Pleiss, Sandra Hirche
- Abstract要約: キャリブレーションされたモデルを設計するための最先端のアプローチは、ガウス過程の後方分散を膨らませることに依存している。
本稿では,バニラガウス過程の後方分散にインスパイアされた計算を用いて,予測量子化を生成するキャリブレーション手法を提案する。
我々のアプローチは合理的な仮定の下で校正されたモデルが得られることを示す。
- 参考スコア(独自算出の注目度): 58.94710279601622
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: While Gaussian processes are a mainstay for various engineering and
scientific applications, the uncertainty estimates don't satisfy frequentist
guarantees and can be miscalibrated in practice. State-of-the-art approaches
for designing calibrated models rely on inflating the Gaussian process
posterior variance, which yields confidence intervals that are potentially too
coarse. To remedy this, we present a calibration approach that generates
predictive quantiles using a computation inspired by the vanilla Gaussian
process posterior variance but using a different set of hyperparameters chosen
to satisfy an empirical calibration constraint. This results in a calibration
approach that is considerably more flexible than existing approaches, which we
optimize to yield tight predictive quantiles. Our approach is shown to yield a
calibrated model under reasonable assumptions. Furthermore, it outperforms
existing approaches in sharpness when employed for calibrated regression.
- Abstract(参考訳): ガウス過程は様々な工学や科学的応用の主軸であるが、不確実性推定は頻繁な保証を満たさず、実際は誤解されることがある。
キャリブレーションされたモデルを設計するための最先端のアプローチは、ガウス過程の後方分散を膨らませることに頼っている。
これを改善するために,バニラガウス過程の後方分散に着想を得た計算を用いて予測量子化を生成するキャリブレーション手法を提案するが,経験的キャリブレーション制約を満たすために選択された異なるハイパーパラメータセットを用いる。
これにより、既存のアプローチよりもかなり柔軟なキャリブレーションアプローチが実現され、我々は厳密な予測量子化を得られるように最適化する。
我々のアプローチは合理的な仮定の下で校正されたモデルが得られることを示す。
さらに、キャリブレーション回帰に使用する場合、既存のアプローチよりもシャープネスが優れている。
関連論文リスト
- Calibration by Distribution Matching: Trainable Kernel Calibration
Metrics [56.629245030893685]
カーネルベースのキャリブレーションメトリクスを導入し、分類と回帰の両方で一般的なキャリブレーションの形式を統一・一般化する。
これらの指標は、異なるサンプル推定を許容しており、キャリブレーションの目的を経験的リスク最小化に組み込むのが容易である。
決定タスクにキャリブレーションメトリクスを調整し、正確な損失推定を行ない、後悔しない決定を行うための直感的なメカニズムを提供する。
論文 参考訳(メタデータ) (2023-10-31T06:19:40Z) - Modular Conformal Calibration [80.33410096908872]
回帰における再校正のためのアルゴリズムを多種多様なクラスで導入する。
このフレームワークは、任意の回帰モデルをキャリブレーションされた確率モデルに変換することを可能にする。
我々は17の回帰データセットに対するMCCの実証的研究を行った。
論文 参考訳(メタデータ) (2022-06-23T03:25:23Z) - T-Cal: An optimal test for the calibration of predictive models [49.11538724574202]
有限検証データセットを用いた予測モデルの誤校正を仮説検証問題として検討する。
誤校正の検出は、クラスの条件付き確率が予測の十分滑らかな関数である場合にのみ可能である。
我々は、$ell$-Expected Error(ECE)のデバイアスドプラグイン推定器に基づくキャリブレーションのためのミニマックステストであるT-Calを提案する。
論文 参考訳(メタデータ) (2022-03-03T16:58:54Z) - Validating Gaussian Process Models with Simulation-Based Calibration [0.0]
本稿では,ガウス過程モデルの実装を検証する手順を紹介する。
既存のコードのバグを特定する上で,この手順の有効性を実証する。
論文 参考訳(メタデータ) (2021-10-27T15:21:44Z) - Scalable Variational Gaussian Processes via Harmonic Kernel
Decomposition [54.07797071198249]
汎用性を維持しつつ高い忠実度近似を提供する,スケーラブルな変分ガウス過程近似を導入する。
様々な回帰問題や分類問題において,本手法は変換やリフレクションなどの入力空間対称性を活用できることを実証する。
提案手法は, 純粋なGPモデルのうち, CIFAR-10 の最先端化を実現する。
論文 参考訳(メタデータ) (2021-06-10T18:17:57Z) - Parameterized Temperature Scaling for Boosting the Expressive Power in
Post-Hoc Uncertainty Calibration [57.568461777747515]
我々は新しいキャリブレーション手法であるパラメタライズド温度スケーリング(PTS)を導入する。
最新のポストホックキャリブレータの精度保持性能は、その本質的な表現力によって制限されることを実証します。
当社の新しい精度保存手法が,多数のモデルアーキテクチャやデータセット,メトリクスにおいて,既存のアルゴリズムを一貫して上回っていることを示す。
論文 参考訳(メタデータ) (2021-02-24T10:18:30Z) - Post-hoc Uncertainty Calibration for Domain Drift Scenarios [46.88826364244423]
既存のポストホックキャリブレーション手法は、ドメインシフト下での過信予測を高い精度で得ることを示した。
ポストホックキャリブレーションステップを実行する前に、検証セットのサンプルに摂動を適用する簡単な戦略を紹介します。
論文 参考訳(メタデータ) (2020-12-20T18:21:13Z) - Calibrated Reliable Regression using Maximum Mean Discrepancy [45.45024203912822]
現代のディープニューラルネットワークは依然として信頼できない予測の不確実性を生んでいる。
本稿では、回帰タスクにおいて、よく校正された予測を得ることを懸念する。
非自明な実データセットに対する実験により,本手法は高い校正と鋭い予測間隔を生成できることが示された。
論文 参考訳(メタデータ) (2020-06-18T03:38:12Z) - Quantile Regularization: Towards Implicit Calibration of Regression
Models [30.872605139672086]
2つのCDF間の累積KL分散として定義される新しい量子正規化器に基づく回帰モデルの校正法を提案する。
提案手法は,Dropout VI や Deep Ensembles といった手法を用いて学習した回帰モデルのキャリブレーションを大幅に改善することを示す。
論文 参考訳(メタデータ) (2020-02-28T16:53:41Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。