論文の概要: Online Calibrated Regression for Adversarially Robust Forecasting
- arxiv url: http://arxiv.org/abs/2302.12196v1
- Date: Thu, 23 Feb 2023 17:42:11 GMT
- ステータス: 処理完了
- システム内更新日: 2023-02-24 14:11:39.462978
- Title: Online Calibrated Regression for Adversarially Robust Forecasting
- Title(参考訳): 逆ロバスト予測のためのオンライン校正回帰
- Authors: Volodymyr Kuleshov, Shachi Deshpande
- Abstract要約: 本稿では,オンライン学習の原理を活かした不確実性推定手法を提案する。
具体的には、既存のオンライン学習手法を拡張して予測の不確実性に対処するオンライン校正予測というタスクを定義する。
本稿では,逆入力においても確率予測の精度とキャリブレーションを公式に保証するアルゴリズムを提案する。
- 参考スコア(独自算出の注目度): 4.395902695568884
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Accurately estimating uncertainty is a crucial component of decision-making
and forecasting in machine learning. However, existing uncertainty estimation
methods developed for IID data may fail when these IID assumptions no longer
hold. In this paper, we present a novel approach to uncertainty estimation that
leverages the principles of online learning. Specifically, we define a task
called online calibrated forecasting which seeks to extend existing online
learning methods to handle predictive uncertainty while ensuring high accuracy.
We introduce algorithms for this task that provide formal guarantees on the
accuracy and calibration of probabilistic predictions even on adversarial
input. We demonstrate the practical utility of our methods on several
forecasting tasks, showing that our probabilistic predictions improve over
natural baselines. Overall, our approach advances calibrated uncertainty
estimation, and takes a step towards more robust and reliable decision-making
and forecasting in risk-sensitive scenarios.
- Abstract(参考訳): 不確実性を正確に推定することは、機械学習における意思決定と予測の重要な要素である。
しかし、IIDデータに対する既存の不確実性推定手法は、これらのIID仮定がもはや成り立たない場合に失敗する可能性がある。
本稿では,オンライン学習の原理を活用した不確実性推定手法を提案する。
具体的には,既存のオンライン学習手法を拡張し,精度を確保しつつ予測の不確実性に対処するオンライン校正予測というタスクを定義する。
本稿では,逆入力においても確率予測の精度とキャリブレーションを公式に保証するアルゴリズムを提案する。
本手法は,いくつかの予測タスクにおいて実用的有用性を示し,自然ベースラインよりも確率的予測が向上することを示す。
全体として、我々のアプローチは不確実性の推定を校正し、より堅牢で信頼性の高い意思決定とリスクに敏感なシナリオの予測に向けて一歩を踏み出します。
関連論文リスト
- Pseudo-Probability Unlearning: Towards Efficient and Privacy-Preserving Machine Unlearning [59.29849532966454]
本稿では,PseudoProbability Unlearning (PPU)を提案する。
提案手法は,最先端の手法に比べて20%以上の誤りを忘れる改善を実現している。
論文 参考訳(メタデータ) (2024-11-04T21:27:06Z) - Calibrated Probabilistic Forecasts for Arbitrary Sequences [58.54729945445505]
実際のデータストリームは、分散シフトやフィードバックループ、敵アクターによって予測不可能に変化する可能性がある。
データがどのように進化するかに関わらず、有効な不確実性推定を保証するための予測フレームワークを提案する。
論文 参考訳(メタデータ) (2024-09-27T21:46:42Z) - Reconciling Model Multiplicity for Downstream Decision Making [24.335927243672952]
2つの予測モデルがほぼ至るところでそれぞれの予測にほぼ一致しているとしても、最も応答性の高い行動が人口のかなりの部分で相違していることが示される。
本稿では,下流決定問題と個別確率予測の両方に関して,予測モデルを校正する枠組みを提案する。
論文 参考訳(メタデータ) (2024-05-30T03:36:46Z) - Uncertainty for Active Learning on Graphs [70.44714133412592]
不確実性サンプリングは、機械学習モデルのデータ効率を改善することを目的とした、アクティブな学習戦略である。
予測の不確実性を超えた不確実性サンプリングをベンチマークし、他のアクティブラーニング戦略に対する大きなパフォーマンスギャップを強調します。
提案手法は,データ生成プロセスの観点から基幹的ベイズ不確実性推定法を開発し,不確実性サンプリングを最適クエリへ導く上での有効性を実証する。
論文 参考訳(メタデータ) (2024-05-02T16:50:47Z) - Calibrated Selective Classification [34.08454890436067]
そこで我々は,「不確か」な不確実性のある例を拒否する手法を提案する。
本稿では,選択的校正モデル学習のためのフレームワークを提案する。そこでは,任意のベースモデルの選択的校正誤差を改善するために,個別のセレクタネットワークを訓練する。
われわれは,複数画像分類と肺癌リスク評価におけるアプローチの実証的効果を実証した。
論文 参考訳(メタデータ) (2022-08-25T13:31:09Z) - Leveraging Unlabeled Data to Predict Out-of-Distribution Performance [63.740181251997306]
実世界の機械学習デプロイメントは、ソース(トレーニング)とターゲット(テスト)ディストリビューションのミスマッチによって特徴づけられる。
本研究では,ラベル付きソースデータとラベルなしターゲットデータのみを用いて,対象領域の精度を予測する手法を検討する。
本稿では,モデルの信頼度をしきい値として学習し,精度をラベルなし例のごく一部として予測する実践的手法である平均閾値保持信頼度(ATC)を提案する。
論文 参考訳(メタデータ) (2022-01-11T23:01:12Z) - Online Calibrated and Conformal Prediction Improves Bayesian Optimization [10.470326550507117]
本稿では,モデルに基づく意思決定やベイズ最適化における不確実性について検討する。
しかし、キャリブレーションの維持は、データが定常的ではなく、我々の行動に依存する場合、困難である。
我々は、オンライン学習に基づく簡単なアルゴリズムを用いて、非i.d.データのキャリブレーションを確実に維持することを提案する。
論文 参考訳(メタデータ) (2021-12-08T23:26:23Z) - Improving Uncertainty Calibration via Prior Augmented Data [56.88185136509654]
ニューラルネットワークは、普遍関数近似器として機能することで、複雑なデータ分布から学習することに成功した。
彼らはしばしば予測に自信過剰であり、不正確で誤った確率的予測に繋がる。
本稿では,モデルが不当に過信である特徴空間の領域を探索し,それらの予測のエントロピーをラベルの以前の分布に対して条件的に高める手法を提案する。
論文 参考訳(メタデータ) (2021-02-22T07:02:37Z) - Privacy Preserving Recalibration under Domain Shift [119.21243107946555]
本稿では,差分プライバシー制約下での校正問題の性質を抽象化する枠組みを提案する。
また、新しいリカレーションアルゴリズム、精度温度スケーリングを設計し、プライベートデータセットの事前処理より優れています。
論文 参考訳(メタデータ) (2020-08-21T18:43:37Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。