論文の概要: Extending Conformal Prediction to Hidden Markov Models with Exact
Validity via de Finetti's Theorem for Markov Chains
- arxiv url: http://arxiv.org/abs/2210.02271v4
- Date: Mon, 22 May 2023 18:07:46 GMT
- ステータス: 処理完了
- システム内更新日: 2023-05-25 01:22:32.531137
- Title: Extending Conformal Prediction to Hidden Markov Models with Exact
Validity via de Finetti's Theorem for Markov Chains
- Title(参考訳): マルコフ連鎖に対するデ・フィネッティの定理による隠れマルコフモデルへの等角性予測の拡張
- Authors: Buddhika Nettasinghe, Samrat Chatterjee, Ramakrishna Tipireddy,
Mahantesh Halappanavar
- Abstract要約: 隠れマルコフモデル(HMM)フレームワークへの共形予測を一般化する。
提案手法の鍵となる考え方は、非交換可能なマルコフデータをHMMから交換可能なブロックに分割することである。
交換可能なブロックの置換は、HMMから観測されたマルコフデータのランダム化と見なされる。
- 参考スコア(独自算出の注目度): 2.774664776768427
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Conformal prediction is a widely used method to quantify the uncertainty of a
classifier under the assumption of exchangeability (e.g., IID data). We
generalize conformal prediction to the Hidden Markov Model (HMM) framework
where the assumption of exchangeability is not valid. The key idea of the
proposed method is to partition the non-exchangeable Markovian data from the
HMM into exchangeable blocks by exploiting the de Finetti's Theorem for Markov
Chains discovered by Diaconis and Freedman (1980). The permutations of the
exchangeable blocks are viewed as randomizations of the observed Markovian data
from the HMM. The proposed method provably retains all desirable theoretical
guarantees offered by the classical conformal prediction framework in both
exchangeable and Markovian settings. In particular, while the lack of
exchangeability introduced by Markovian samples constitutes a violation of a
crucial assumption for classical conformal prediction, the proposed method
views it as an advantage that can be exploited to improve the performance
further. Detailed numerical and empirical results that complement the
theoretical conclusions are provided to illustrate the practical feasibility of
the proposed method.
- Abstract(参考訳): 等式予測は、交換可能性(IIDデータなど)の仮定の下で分類器の不確かさを定量化するために広く用いられる手法である。
交換可能性の仮定が妥当でない隠れマルコフモデル(HMM)フレームワークへの共形予測を一般化する。
提案手法の重要なアイデアは、diaconis and freedman (1980) によって発見されたマルコフ連鎖に対するde finettiの定理を利用して、交換不能なマルコフデータをhmmから交換可能なブロックに分割することである。
交換可能なブロックの置換は、HMMから観測されたマルコフデータのランダム化と見なされる。
提案手法は,古典的共形予測フレームワークが提案するすべての理論的保証を,交換可能な設定とマルコフ的設定の両方で確実に保持する。
特に,マルコフサンプルが導入した交換可能性の欠如は,古典的共形予測の重要な前提に反するものであるが,提案手法は,さらなる性能向上に活用できる利点であると考えている。
提案手法の実用性を示すために, 理論的結論を補完する詳細な数値および実験結果を提供する。
関連論文リスト
- FEMDA: a unified framework for discriminant analysis [4.6040036610482655]
非ガウスデータセットを扱うための新しいアプローチを提案する。
考慮されているモデルは、任意のスケールパラメータを持つクラスタ毎の任意の対称性(ES)分布である。
新しい決定規則を導出することにより,最大値のパラメータ推定と分類が,最先端手法と比較してシンプルで効率的で堅牢であることを示す。
論文 参考訳(メタデータ) (2023-11-13T17:59:37Z) - Prototype-based Aleatoric Uncertainty Quantification for Cross-modal
Retrieval [139.21955930418815]
クロスモーダル検索手法は、共通表現空間を共同学習することにより、視覚と言語モダリティの類似性関係を構築する。
しかし、この予測は、低品質なデータ、例えば、腐敗した画像、速いペースの動画、詳細でないテキストによって引き起こされるアレタリック不確実性のために、しばしば信頼性が低い。
本稿では, 原型に基づくAleatoric Uncertainity Quantification (PAU) フレームワークを提案する。
論文 参考訳(メタデータ) (2023-09-29T09:41:19Z) - Invariant Probabilistic Prediction [45.90606906307022]
任意の分布シフトは、一般に不変かつ頑健な確率的予測を認めないことを示す。
Invariant probabilistic predictions called IPP, and study the consistency of the underlying parameters。
論文 参考訳(メタデータ) (2023-09-18T18:50:24Z) - Conformal Prediction for Federated Uncertainty Quantification Under
Label Shift [57.54977668978613]
Federated Learning(FL)は、多くのクライアントが協力してモデルをトレーニングする機械学習フレームワークである。
我々は、量子回帰に基づく新しいコンフォメーション予測法を開発し、プライバシー制約を考慮した。
論文 参考訳(メタデータ) (2023-06-08T11:54:58Z) - Federated Conformal Predictors for Distributed Uncertainty
Quantification [83.50609351513886]
コンフォーマル予測は、機械学習において厳密な不確実性定量化を提供するための一般的なパラダイムとして現れつつある。
本稿では,共形予測を連邦学習環境に拡張する。
本稿では、FL設定に適した部分交換可能性の弱い概念を提案し、それをフェデレート・コンフォーマル予測フレームワークの開発に利用する。
論文 参考訳(メタデータ) (2023-05-27T19:57:27Z) - Meta-Uncertainty in Bayesian Model Comparison [0.0]
メタ不確かさの定量化のための完全確率的枠組みを提案する。
提案手法の有用性を,共役ベイズ回帰,マルコフ連鎖モンテカルロによる確率ベース推論,ニューラルネットワークによるシミュレーションベース推論の文脈で示す。
論文 参考訳(メタデータ) (2022-10-13T18:10:29Z) - Uncertainty Estimation for Heatmap-based Landmark Localization [4.673063715963989]
推定誤差境界を持つ不確実性によって予測を分類するデータ駆動手法であるQuantile Binningを提案する。
この枠組みは,3つの不確実性対策を比較し,対比することによって実証する。
我々は、Quantile Binsで捕捉された大まかな誤予測をフィルタリングすることで、許容可能なエラー閾値下での予測の割合を大幅に改善する、という結論を導いた。
論文 参考訳(メタデータ) (2022-03-04T14:40:44Z) - High-dimensional Inference and FDR Control for Simulated Markov Random
Fields [1.9458156037869137]
本稿では,高次元環境におけるマルコフ確率場に対する統計的推測について検討する。
弾性ネット正規化を用いた最大チェインモンテカルロ類似度推定法を提案する。
論文 参考訳(メタデータ) (2022-02-11T13:49:08Z) - CovarianceNet: Conditional Generative Model for Correct Covariance
Prediction in Human Motion Prediction [71.31516599226606]
本稿では,将来の軌道の予測分布に関連する不確かさを正確に予測する手法を提案する。
我々のアプローチであるCovariaceNetは、ガウス潜在変数を持つ条件付き生成モデルに基づいている。
論文 参考訳(メタデータ) (2021-09-07T09:38:24Z) - A Unified Joint Maximum Mean Discrepancy for Domain Adaptation [73.44809425486767]
本論文は,最適化が容易なjmmdの統一形式を理論的に導出する。
統合JMMDから、JMMDは分類に有利な特徴ラベル依存を低下させることを示す。
本稿では,その依存を促進する新たなmmd行列を提案し,ラベル分布シフトにロバストな新しいラベルカーネルを考案する。
論文 参考訳(メタデータ) (2021-01-25T09:46:14Z) - MCMC-Interactive Variational Inference [56.58416764959414]
本稿では, MCMC-interactive variational inference (MIVI) を提案し, 後部を時間制約で推定する。
MIVIは変分推論とMCMCの相補的特性を利用して相互改善を促進する。
実験により、MIVIは後部を正確に近似するだけでなく、勾配MCMCとギブスサンプリング遷移の設計を容易にすることが示された。
論文 参考訳(メタデータ) (2020-10-02T17:43:20Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。