論文の概要: AutoCP: Automated Pipelines for Accurate Prediction Intervals
- arxiv url: http://arxiv.org/abs/2006.14099v2
- Date: Sun, 13 Sep 2020 15:29:34 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-17 09:31:17.049739
- Title: AutoCP: Automated Pipelines for Accurate Prediction Intervals
- Title(参考訳): AutoCP: 正確な予測間隔のための自動パイプライン
- Authors: Yao Zhang and William Zame and Mihaela van der Schaar
- Abstract要約: 本稿では、自動予測のための自動機械学習(Automatic Machine Learning for Conformal Prediction, AutoCP)というAutoMLフレームワークを提案する。
最高の予測モデルを選択しようとする慣れ親しんだAutoMLフレームワークとは異なり、AutoCPは、ユーザが指定したターゲットカバレッジ率を達成する予測間隔を構築する。
さまざまなデータセットでAutoCPをテストしたところ、ベンチマークアルゴリズムを著しく上回っていることがわかった。
- 参考スコア(独自算出の注目度): 84.16181066107984
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Successful application of machine learning models to real-world prediction
problems, e.g. financial forecasting and personalized medicine, has proved to
be challenging, because such settings require limiting and quantifying the
uncertainty in the model predictions, i.e. providing valid and accurate
prediction intervals. Conformal Prediction is a distribution-free approach to
construct valid prediction intervals in finite samples. However, the prediction
intervals constructed by Conformal Prediction are often (because of
over-fitting, inappropriate measures of nonconformity, or other issues) overly
conservative and hence inadequate for the application(s) at hand. This paper
proposes an AutoML framework called Automatic Machine Learning for Conformal
Prediction (AutoCP). Unlike the familiar AutoML frameworks that attempt to
select the best prediction model, AutoCP constructs prediction intervals that
achieve the user-specified target coverage rate while optimizing the interval
length to be accurate and less conservative. We tested AutoCP on a variety of
datasets and found that it significantly outperforms benchmark algorithms.
- Abstract(参考訳): 金融予測やパーソナライズされた医療といった現実世界の予測問題への機械学習モデルの適用の成功は、モデル予測の不確実性を制限し、定量化する必要があるため、困難であることが証明されている。
共形予測(conformal prediction)は、有限サンプルにおける妥当な予測間隔を構築するための分布のないアプローチである。
しかし、共形予測によって構築される予測間隔は、しばしば(過剰フィッティング、不適切な非共形性の尺度、その他の問題のために)過度に保守的であり、したがって手前の用途に不適当である。
本稿では,Automatic Machine Learning for Conformal Prediction (AutoCP)と呼ばれるAutoMLフレームワークを提案する。
最適な予測モデルを選択しようとするよく知られたautomlフレームワークとは異なり、autocpはユーザの特定対象カバレッジ率を達成する予測インターバルを構築し、インターバル長を正確かつ控えめに最適化する。
さまざまなデータセットでAutoCPをテストしたところ、ベンチマークアルゴリズムを著しく上回っていることがわかった。
関連論文リスト
- Multi-model Ensemble Conformal Prediction in Dynamic Environments [14.188004615463742]
本稿では,複数の候補モデルから予測セットを作成するために使用されるモデルを選択する適応型共形予測フレームワークを提案する。
提案アルゴリズムは, 有効なカバレッジを維持しつつ, 全区間にわたる強い適応的後悔を達成できることが証明された。
論文 参考訳(メタデータ) (2024-11-06T05:57:28Z) - Normalizing Flows for Conformal Regression [0.0]
Conformal Prediction (CP)アルゴリズムは、ラベル付きデータに基づいて出力を校正することで予測モデルの不確実性を推定する。
キャリブレーション過程をトレーニングすることで、間隔をローカライズする一般的なスキームを提案する。
PapadopoulosらによるError Reweighting CPアルゴリズム(2008年)とは異なり、このフレームワークは名目と経験的条件の妥当性のギャップを推定できる。
論文 参考訳(メタデータ) (2024-06-05T15:04:28Z) - Conformal online model aggregation [29.43493007296859]
本稿では,オンライン環境における共形モデルアグリゲーションへの新たなアプローチを提案する。
これは、過去の性能に基づいてモデルの重みが時間とともに適応される投票によって、いくつかのアルゴリズムの予測セットを組み合わせることに基づいている。
論文 参考訳(メタデータ) (2024-03-22T15:40:06Z) - Conformal Prediction for Deep Classifier via Label Ranking [29.784336674173616]
コンフォーマル予測(Conformal prediction)は、予測セットを所望のカバレッジ保証で生成する統計フレームワークである。
我々は、$textitSorted Adaptive Prediction Sets$ (SAPS)という新しいアルゴリズムを提案する。
SAPSは最大ソフトマックス確率を除いて全ての確率値を捨てる。
論文 参考訳(メタデータ) (2023-10-10T08:54:14Z) - Uncertainty Quantification over Graph with Conformalized Graph Neural
Networks [52.20904874696597]
グラフニューラルネットワーク(GNN)は、グラフ構造化データに基づく強力な機械学習予測モデルである。
GNNには厳密な不確実性見積が欠如しており、エラーのコストが重要な設定での信頼性の高いデプロイメントが制限されている。
本稿では,共形予測(CP)をグラフベースモデルに拡張した共形GNN(CF-GNN)を提案する。
論文 参考訳(メタデータ) (2023-05-23T21:38:23Z) - Conformal Prediction Regions for Time Series using Linear
Complementarity Programming [25.094249285804224]
本稿では,長期の地平面計画と検証を可能にするために,保守性を低減する最適化手法を提案する。
この問題を混合整数線形相補性プログラム (MILCP) としてキャストし, 線形相補性プログラム (LCP) に緩和することを示した。
論文 参考訳(メタデータ) (2023-04-03T15:32:38Z) - Improving Adaptive Conformal Prediction Using Self-Supervised Learning [72.2614468437919]
我々は、既存の予測モデルの上に自己教師付きプレテキストタスクを持つ補助モデルを訓練し、自己教師付きエラーを付加的な特徴として用いて、非整合性スコアを推定する。
合成データと実データの両方を用いて、効率(幅)、欠陥、共形予測間隔の超過といった付加情報の利点を実証的に実証する。
論文 参考訳(メタデータ) (2023-02-23T18:57:14Z) - Uncertainty estimation of pedestrian future trajectory using Bayesian
approximation [137.00426219455116]
動的トラフィックシナリオでは、決定論的予測に基づく計画は信頼できない。
著者らは、決定論的アプローチが捉えられない近似を用いて予測中の不確実性を定量化する。
将来の状態の不確実性に対する降雨重量と長期予測の影響について検討した。
論文 参考訳(メタデータ) (2022-05-04T04:23:38Z) - Efficient and Differentiable Conformal Prediction with General Function
Classes [96.74055810115456]
本稿では,複数の学習可能なパラメータに対する共形予測の一般化を提案する。
本研究は, クラス内において, ほぼ有効な人口被覆率, ほぼ最適効率を実現していることを示す。
実験の結果,提案アルゴリズムは有効な予測セットを学習し,効率を著しく向上できることがわかった。
論文 参考訳(メタデータ) (2022-02-22T18:37:23Z) - Private Prediction Sets [72.75711776601973]
機械学習システムは、個人のプライバシーの確実な定量化と保護を必要とする。
これら2つのデシラタを共同で扱う枠組みを提案する。
本手法を大規模コンピュータビジョンデータセット上で評価する。
論文 参考訳(メタデータ) (2021-02-11T18:59:11Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。