論文の概要: Questioning the Coverage-Length Metric in Conformal Prediction: When Shorter Intervals Are Not Better
- arxiv url: http://arxiv.org/abs/2601.21455v1
- Date: Thu, 29 Jan 2026 09:31:28 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-01-30 16:22:49.701492
- Title: Questioning the Coverage-Length Metric in Conformal Prediction: When Shorter Intervals Are Not Better
- Title(参考訳): コンフォーマル予測における被覆長尺度の問合せ:短区間が改善しなかった場合
- Authors: Yizhou Min, Yizhou Lu, Lanqi Li, Zhen Zhang, Jiaye Teng,
- Abstract要約: コンフォーマル予測(CP)は分布のない不確実性定量化の基礎となっている。
この研究は、これらの標準メトリクスの十分性について批判的に検証する。
偏差トリック (PT) と呼ばれる反直観的アプローチにより, 間隔長が知覚的に改善されることが実証された。
- 参考スコア(独自算出の注目度): 8.898113982504247
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Conformal prediction (CP) has become a cornerstone of distribution-free uncertainty quantification, conventionally evaluated by its coverage and interval length. This work critically examines the sufficiency of these standard metrics. We demonstrate that the interval length might be deceptively improved through a counter-intuitive approach termed Prejudicial Trick (PT), while the coverage remains valid. Specifically, for any given test sample, PT probabilistically returns an interval, which is either null or constructed using an adjusted confidence level, thereby preserving marginal coverage. While PT potentially yields a deceptively lower interval length, it introduces practical vulnerabilities: the same input can yield completely different prediction intervals across repeated runs of the algorithm. We formally derive the conditions under which PT achieves these misleading improvements and provides extensive empirical evidence across various regression and classification tasks. Furthermore, we introduce a new metric interval stability which helps detect whether a new CP method implicitly improves the length based on such PT-like techniques.
- Abstract(参考訳): コンフォーマル予測(CP)は分布のない不確実性定量化の基礎となり、従来はその範囲と間隔長によって評価されてきた。
この研究は、これらの標準メトリクスの十分性について批判的に検証する。
範囲長は,PT (Prejudicial Trick) と呼ばれる反直観的アプローチによって認知的に改善される可能性があるが,カバー範囲は依然として有効である。
具体的には、任意のテストサンプルに対して、PTは確率的に区間を返し、これはヌルか調整された信頼度レベルを用いて構成される。
PTは知覚的に低い間隔長を生じる可能性があるが、実際的な脆弱性が生じる:同じ入力はアルゴリズムの繰り返し実行間で全く異なる予測間隔を得ることができる。
我々は、PTがこれらの誤解を招く改善を実現する条件を正式に導出し、様々な回帰および分類タスクにまたがる広範な実証的証拠を提供する。
さらに,新しいCP法がPTライクな手法で暗黙的に長さを向上するかどうかを検出するために,新しい距離間隔安定性を導入する。
関連論文リスト
- Stopping Rules for Stochastic Gradient Descent via Anytime-Valid Confidence Sequences [51.56484100374058]
凸最適化のための勾配降下(SGD)の停止規則について検討した。
我々は、投影されたSGDの重み付き平均準最適度に対して、任意の有意、データ依存の高信頼シーケンスを開発する。
これらは、厳格でタイムユニフォームなパフォーマンス保証と、有限時間$varepsilon$-optimality証明書である。
論文 参考訳(メタデータ) (2025-12-15T09:26:45Z) - Distribution-informed Online Conformal Prediction [53.674678995825666]
更新ルールに基礎となるデータパターンを組み込んだオンラインコンフォメーション予測アルゴリズムである Conformal Optimistic Prediction (COP) を提案する。
COPは予測可能なパターンが存在する場合により厳密な予測セットを生成し、見積もりが不正確な場合でも有効なカバレッジ保証を保持する。
我々は,COPが有効なカバレッジを実現し,他のベースラインよりも短い予測間隔を構築できることを証明した。
論文 参考訳(メタデータ) (2025-12-08T17:51:49Z) - Relevance-Aware Thresholding in Online Conformal Prediction for Time Series [1.8744230606349503]
オンラインコンフォーマル予測(OCP)は、時間とともにデータ分散がシフトする問題に対処するオプションである。
本稿では,2値評価(内/外)をより広範な機能クラスに置き換えることにより,しきい値更新ステップの強化を提案する。
このアプローチは、急激な閾値変化を防止し、予測間隔を狭める可能性がある。
論文 参考訳(メタデータ) (2025-10-03T08:31:14Z) - Conformal Prediction for Signal Temporal Logic Inference [13.843989967082031]
信号時間論理(STL)推論は時系列データから人間の解釈可能な規則を抽出しようとする。
既存のメソッドには、推論されたルールに対する正式な信頼性保証がない。
STL推論のためのエンドツーエンドの差別化可能なCPフレームワークを導入し、信頼性と解釈性の両方を向上させる。
論文 参考訳(メタデータ) (2025-09-29T20:25:02Z) - Conformal Inference of Individual Treatment Effects Using Conditional Density Estimates [3.7307776333361122]
現在の最先端のアプローチは、有効な予測間隔を提供する一方で、しばしば過度に保守的な予測間隔をもたらす。
本研究では,結果の条件密度を用いたITEに対する共形推論手法を提案する。
予測間隔は, 限界的に有効であるだけでなく, 既存の手法よりも狭いことを示す。
論文 参考訳(メタデータ) (2025-01-24T21:46:37Z) - Conformal Thresholded Intervals for Efficient Regression [9.559062601251464]
Conformal Thresholded Intervals (CTI) は、カバー範囲が保証された最小限の予測セットを生成することを目的とした、新しいコンフォメーション回帰手法である。
CTIは、その長さに基づいて推定された条件間間隔をしきい値にすることで予測セットを構築する。
CTIは、様々なデータセットにわたる最先端のコンフォメーション回帰手法よりも優れた性能を達成している。
論文 参考訳(メタデータ) (2024-07-19T17:47:08Z) - Relaxed Quantile Regression: Prediction Intervals for Asymmetric Noise [51.87307904567702]
量子レグレッション(Quantile regression)は、出力の分布における量子の実験的推定を通じてそのような間隔を得るための主要なアプローチである。
本稿では、この任意の制約を除去する量子回帰に基づく区間構成の直接的な代替として、Relaxed Quantile Regression (RQR)を提案する。
これにより、柔軟性が向上し、望ましい品質が向上することが実証された。
論文 参考訳(メタデータ) (2024-06-05T13:36:38Z) - Adapting to Continuous Covariate Shift via Online Density Ratio Estimation [64.8027122329609]
分散シフトへの対処は、現代の機械学習における中心的な課題の1つだ。
歴史的情報を適切に再利用するオンライン手法を提案する。
我々の密度比推定法は, ダイナミックなリセットバウンドを楽しむことにより, 良好に動作できることが証明された。
論文 参考訳(メタデータ) (2023-02-06T04:03:33Z) - Double Robust Bayesian Inference on Average Treatment Effects [2.458652618559425]
不整合下での平均処理効果(ATE)に対する二重頑健なベイズ推定法を提案する。
新しいベイズ的アプローチでは、まず条件付き平均関数の事前分布を調整し、得られた ATE の後方分布を補正する。
論文 参考訳(メタデータ) (2022-11-29T15:32:25Z) - CoinDICE: Off-Policy Confidence Interval Estimation [107.86876722777535]
強化学習における高信頼行動非依存のオフ政治評価について検討する。
様々なベンチマークにおいて、信頼区間推定が既存の手法よりも厳密で精度が高いことが示されている。
論文 参考訳(メタデータ) (2020-10-22T12:39:11Z) - Optimal Change-Point Detection with Training Sequences in the Large and
Moderate Deviations Regimes [72.68201611113673]
本稿では,情報理論の観点から,新しいオフライン変化点検出問題について検討する。
基礎となる事前および変更後分布の知識は分かっておらず、利用可能なトレーニングシーケンスからのみ学習できると仮定する。
論文 参考訳(メタデータ) (2020-03-13T23:39:40Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。