論文の概要: Extending Conformal Prediction to Hidden Markov Models with Exact
Validity via de Finetti's Theorem for Markov Chains
- arxiv url: http://arxiv.org/abs/2210.02271v1
- Date: Wed, 5 Oct 2022 13:54:56 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-06 15:36:56.171926
- Title: Extending Conformal Prediction to Hidden Markov Models with Exact
Validity via de Finetti's Theorem for Markov Chains
- Title(参考訳): マルコフ連鎖に対するデ・フィネッティの定理による隠れマルコフモデルへの等角性予測の拡張
- Authors: Buddhika Nettasinghe, Samrat Chatterjee, Ramakrishna Tipireddy,
Mahantesh Halappanavar
- Abstract要約: 共形予測を非交換可能なマルコフデータに拡張する。
我々は、ディアコニスとフリードマンによって発見されたマルコフ・チェインについて、デ・フィネッティの理論を利用する。
交換可能なブロックの置換は、観測されたマルコフデータのランダム化と見なされる。
- 参考スコア(独自算出の注目度): 2.774664776768427
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Conformal prediction is a widely used method to quantify uncertainty in
settings where the data is independent and identically distributed (IID), or
more generally, exchangeable. Conformal prediction takes in a pre-trained
classifier, a calibration dataset and a confidence level as inputs, and returns
a function which maps feature vectors to subsets of classes. The output of the
returned function for a new feature vector (i.e., a test data point) is
guaranteed to contain the true class with the pre-specified confidence. Despite
its success and usefulness in IID settings, extending conformal prediction to
non-exchangeable (e.g., Markovian) data in a manner that provably preserves all
desirable theoretical properties has largely remained an open problem. As a
solution, we extend conformal prediction to the setting of a Hidden Markov
Model (HMM) with unknown parameters. The key idea behind the proposed method is
to partition the non-exchangeable Markovian data from the HMM into exchangeable
blocks by exploiting the de Finetti's Theorem for Markov Chains discovered by
Diaconis and Freedman (1980). The permutations of the exchangeable blocks are
then viewed as randomizations of the observed Markovian data from the HMM. The
proposed method provably retains all desirable theoretical guarantees offered
by the classical conformal prediction framework and is general enough to be
useful in many sequential prediction problems.
- Abstract(参考訳): 共形予測(conformal prediction)は、データが独立かつ同一の分散(iid)またはより一般に交換可能な設定における不確実性を定量化する手法である。
コンフォーマル予測は、事前訓練された分類器、キャリブレーションデータセット、信頼レベルを入力として取り、特徴ベクトルをクラスのサブセットにマップする関数を返す。
新たな特徴ベクトル(すなわちテストデータポイント)に対する返却関数の出力は、所定の信頼度を持つ真のクラスを含むことが保証される。
iidの設定での成功と有用性にもかかわらず、共形予測を交換不能なデータ(例えばマルコフ的データ)に拡張し、全ての望ましい理論的性質を確実に保存する手法は、ほとんど未解決の問題のままである。
解法として、未知のパラメータを持つ隠れマルコフモデル(HMM)の設定に共形予測を拡張する。
提案手法の背後にある重要なアイデアは、diaconis and freedman (1980) によって発見されたマルコフ連鎖に対するde finettiの定理を利用して、交換不能なマルコフデータをhmmから交換可能なブロックに分割することである。
交換可能なブロックの置換は、HMMから観測されたマルコフデータのランダム化と見なされる。
提案手法は,古典的共形予測フレームワークが提案するすべての理論的保証を確実に保持し,多くの逐次予測問題に有効である。
関連論文リスト
- FEMDA: a unified framework for discriminant analysis [4.6040036610482655]
非ガウスデータセットを扱うための新しいアプローチを提案する。
考慮されているモデルは、任意のスケールパラメータを持つクラスタ毎の任意の対称性(ES)分布である。
新しい決定規則を導出することにより,最大値のパラメータ推定と分類が,最先端手法と比較してシンプルで効率的で堅牢であることを示す。
論文 参考訳(メタデータ) (2023-11-13T17:59:37Z) - Prototype-based Aleatoric Uncertainty Quantification for Cross-modal
Retrieval [139.21955930418815]
クロスモーダル検索手法は、共通表現空間を共同学習することにより、視覚と言語モダリティの類似性関係を構築する。
しかし、この予測は、低品質なデータ、例えば、腐敗した画像、速いペースの動画、詳細でないテキストによって引き起こされるアレタリック不確実性のために、しばしば信頼性が低い。
本稿では, 原型に基づくAleatoric Uncertainity Quantification (PAU) フレームワークを提案する。
論文 参考訳(メタデータ) (2023-09-29T09:41:19Z) - Invariant Probabilistic Prediction [45.90606906307022]
任意の分布シフトは、一般に不変かつ頑健な確率的予測を認めないことを示す。
Invariant probabilistic predictions called IPP, and study the consistency of the underlying parameters。
論文 参考訳(メタデータ) (2023-09-18T18:50:24Z) - Conformal Prediction for Federated Uncertainty Quantification Under
Label Shift [57.54977668978613]
Federated Learning(FL)は、多くのクライアントが協力してモデルをトレーニングする機械学習フレームワークである。
我々は、量子回帰に基づく新しいコンフォメーション予測法を開発し、プライバシー制約を考慮した。
論文 参考訳(メタデータ) (2023-06-08T11:54:58Z) - Federated Conformal Predictors for Distributed Uncertainty
Quantification [83.50609351513886]
コンフォーマル予測は、機械学習において厳密な不確実性定量化を提供するための一般的なパラダイムとして現れつつある。
本稿では,共形予測を連邦学習環境に拡張する。
本稿では、FL設定に適した部分交換可能性の弱い概念を提案し、それをフェデレート・コンフォーマル予測フレームワークの開発に利用する。
論文 参考訳(メタデータ) (2023-05-27T19:57:27Z) - Meta-Uncertainty in Bayesian Model Comparison [0.0]
メタ不確かさの定量化のための完全確率的枠組みを提案する。
提案手法の有用性を,共役ベイズ回帰,マルコフ連鎖モンテカルロによる確率ベース推論,ニューラルネットワークによるシミュレーションベース推論の文脈で示す。
論文 参考訳(メタデータ) (2022-10-13T18:10:29Z) - Uncertainty Estimation for Heatmap-based Landmark Localization [4.673063715963989]
推定誤差境界を持つ不確実性によって予測を分類するデータ駆動手法であるQuantile Binningを提案する。
この枠組みは,3つの不確実性対策を比較し,対比することによって実証する。
我々は、Quantile Binsで捕捉された大まかな誤予測をフィルタリングすることで、許容可能なエラー閾値下での予測の割合を大幅に改善する、という結論を導いた。
論文 参考訳(メタデータ) (2022-03-04T14:40:44Z) - High-dimensional Inference and FDR Control for Simulated Markov Random
Fields [1.9458156037869137]
本稿では,高次元環境におけるマルコフ確率場に対する統計的推測について検討する。
弾性ネット正規化を用いた最大チェインモンテカルロ類似度推定法を提案する。
論文 参考訳(メタデータ) (2022-02-11T13:49:08Z) - CovarianceNet: Conditional Generative Model for Correct Covariance
Prediction in Human Motion Prediction [71.31516599226606]
本稿では,将来の軌道の予測分布に関連する不確かさを正確に予測する手法を提案する。
我々のアプローチであるCovariaceNetは、ガウス潜在変数を持つ条件付き生成モデルに基づいている。
論文 参考訳(メタデータ) (2021-09-07T09:38:24Z) - A Unified Joint Maximum Mean Discrepancy for Domain Adaptation [73.44809425486767]
本論文は,最適化が容易なjmmdの統一形式を理論的に導出する。
統合JMMDから、JMMDは分類に有利な特徴ラベル依存を低下させることを示す。
本稿では,その依存を促進する新たなmmd行列を提案し,ラベル分布シフトにロバストな新しいラベルカーネルを考案する。
論文 参考訳(メタデータ) (2021-01-25T09:46:14Z) - MCMC-Interactive Variational Inference [56.58416764959414]
本稿では, MCMC-interactive variational inference (MIVI) を提案し, 後部を時間制約で推定する。
MIVIは変分推論とMCMCの相補的特性を利用して相互改善を促進する。
実験により、MIVIは後部を正確に近似するだけでなく、勾配MCMCとギブスサンプリング遷移の設計を容易にすることが示された。
論文 参考訳(メタデータ) (2020-10-02T17:43:20Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。