論文の概要: SCOPE Before You Sample: Conformal Scores Guide Posterior Exploration for Fast and Calibrated Bayesian Predictive Inference
- arxiv url: http://arxiv.org/abs/2610.17146v1
- Date: Mon, 12 Oct 2026 17:27:47 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-18 03:05:25.77844
- Title: SCOPE Before You Sample: Conformal Scores Guide Posterior Exploration for Fast and Calibrated Bayesian Predictive Inference
- Title(参考訳): SCOPE before you Sample: Conformal Scores Guide Posterior Exploration for Fast and Calibrated Bayesian Predictive Inference
- Abstract要約: SCOPE (Score-guided Conformal Posterior Exploration) は、完全なMCMCの予測品質を維持しつつ、そのコストのごく一部でキャリブレーションされたカバレッジを達成している。
SCOPE はハミルトニアン・モンテカルロ (HMC) に対して 0.002 Nats の正中テスト-NLL ギャップを持つことを示す。
シミュレーションおよび実測値全体で、SCOPEは、フルハミルトニアンモンテカルロ(HMC)と比較して、0.002ナットの試験-NLLギャップが中央値である。
- 参考スコア(独自算出の注目度): 2.0561164181302343
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Bayesian predictive regions account for parameter uncertainty but can be poorly calibrated under model misspecification, even with expensive full MCMC. Cheaper approximations such as variational inference reduce the cost but often yield less accurate predictive distributions. We propose SCOPE (Score-guided Conformal Posterior Exploration), which retains the predictive quality of full MCMC while achieving calibrated coverage at a fraction of its cost. The key observation is that a prediction region can depend on the posterior mainly through a few parameter directions that move the region's boundary, and these are generally not the directions of largest posterior variance. SCOPE gives nonconformity scores a new role in guiding posterior computation: score gradients on a held-out guide set, weighted toward the target boundary, identify the relevant directions. MCMC explores this subspace, while an inexpensive projected variational approximation carries the remaining uncertainty. The same guide set calibrates the region's final density level. We establish asymptotic coverage for SCOPE and provide a split variant with finite-sample validity. Controlled simulations show that score-guided exploration yields more accurate calibrated regions than non-targeted direction choices at low active rank. Across simulated and real benchmarks, SCOPE has a median test-NLL gap of only 0.002 nats relative to full Hamiltonian Monte Carlo (HMC), and on the real benchmarks it runs 12-15 times faster.
- Abstract(参考訳): ベイズ予測領域はパラメータの不確かさを説明できるが、高価な完全MCMCであっても、モデルミススペクテーションの下では校正が不十分である。
変動推論のようなチーパー近似はコストを低減させるが、しばしば精度の低い予測分布をもたらす。
本研究は,SCPE (Score-Guided Conformal Posterior Exploration) を提案する。
重要な観察は、予測領域は、主に領域の境界を移動するいくつかのパラメータ方向を通して後部に依存することができ、これらは一般に最大の後部分散の方向ではないことである。
SCOPEは非整合性スコアに後続計算を導く新しい役割を与える: 保持されたガイドセット上のスコア勾配を目標境界に向かって重み付け、関連する方向を特定する。
MCMCはこの部分空間を探索し、安価な予測変動近似は残りの不確実性をもたらす。
同じガイドセットは、地域の最終的な密度レベルをカリブレートする。
我々はSCOPEの漸近的カバレッジを確立し、有限サンプルの有効性を持つ分割変種を提供する。
制御されたシミュレーションにより、スコア誘導探索は、低アクティブランクの非目標方向選択よりも正確なキャリブレーション領域が得られることが示された。
シミュレーションと実際のベンチマーク全体で、SCOPEはフルハミルトンモンテカルロ(HMC)と比較して0.002ナットのテスト-NLLギャップが中央値であり、実際のベンチマークでは12~15倍高速である。
関連論文リスト
- Iterative Exact Discrete Guidance for Energy-Based Sampling [28.35783874661985]
Iterative Exact Discrete Guidance (IEDG) は、非正規化された離散目標に対する、集団的かつ軌跡的ガイダンスフレームワークである。
各段階は、電流源の増分ボルツマン傾きに対する段階的局所的後補正を学習する。
個体群最適では、正確なステージ後部が正しいリバースダイナミクスを回復し、その正確なシミュレーションはターゲット分布を再現する。
論文 参考訳(メタデータ) (2026-09-29T08:51:20Z) - Conformal Prediction and Conditional Coverage for Tabular Foundation Models [12.905286310477456]
C-USIMは、高い予測密度分割共形予測の軽量な応用である。
これは我々の仮定の下で有限サンプルの限界有効性を提供する。
TabPFNとTabICLによる実験では、限界カバレッジ精度が向上し、平均条件およびグループカバレッジエラーが低減された。
論文 参考訳(メタデータ) (2026-09-28T10:58:51Z) - Online Supervised Dimension Reduction with Random Features: Diagnostics and Computational Trade-offs [3.7044133020722954]
Online Kernel Supervised principal Component Analysis (OKSPCA)は、有限乱数係数座標における中心となるクロスモーメントと、確立された目的に対するAdamスタイルの正則基底更新を組み合わせたものである。
有限乱数係数座標における中心的クロスモーメントと、確立された目的に対するAdamスタイルの正規直交基底更新を組み合わせたOKSPCAについて、これらの区別について検討する。
論文 参考訳(メタデータ) (2026-09-17T14:19:29Z) - SPARC: Single-Pass Scaling for Motion Forecasting with Conformal Bayesian Last Layers [1.4452289368758382]
シングルパス適応リスク(英: Single-Pass Adaptive Risk)は、人間の動き予測器に対する構造的、校正的、効率的な不確実性推定である。
決定論的バックボーンは将来の平均を予測し、共役ベイズ最後の層は時間領域の特徴レバレッジを解析的地平線スケールに変換する。
NLLと組み合わせたMPJPE+NLLの基準では、競争点の精度と効率的な校正管を維持している。
論文 参考訳(メタデータ) (2026-08-21T07:20:22Z) - How Useful is Causal Invariance for Domain Adaptation in Finite-Sample Settings? [58.740078141879984]
機械学習モデルは、トレーニングされたソースディストリビューションとは異なるターゲットディストリビューションにデプロイされると、しばしば劣化する。
因果関係に基づく領域一般化における最近の研究は、共用因果構造が不変な予測因子を誘導する方法を示している。
本稿では,完全あるいは部分的な因果知識が,教師付きドメイン適応を確実に改善できるかどうかについて検討する。
論文 参考訳(メタデータ) (2026-06-10T21:07:49Z) - Goal-Oriented Lower-Tail Calibration of Gaussian Processes for Bayesian Optimization [0.0]
本稿では,ノイズレス環境下でのGP予測分布の目標方向キャリブレーションについて,低閾値の$t$以下で検討する。
空間キャリブレーションという2つの概念に基づいて,$t$以下の予測信頼性の枠組みを導入する。
このフレームワーク上に構築されたtcGPは,GP予測分布を$t$以下に校正するポストホック法である。
論文 参考訳(メタデータ) (2026-05-19T17:32:25Z) - From Noisy Traces to Stable Gradients: Bias-Variance Optimized Preference Optimization for Aligning Large Reasoning Models [90.45197506653341]
大規模推論モデルは最終回答を生成する前に中間的推論トレースを生成する。
LRMと人間の好みの整合性は、モデルデプロイメントにとって重要な前提条件であり、まだ過小評価されていない。
共通の回避策は1つのサンプル軌道を最適化し、トレースサンプリングからかなり勾配のばらつきをもたらす。
論文 参考訳(メタデータ) (2025-10-06T17:58:01Z) - On Calibrating Semantic Segmentation Models: Analyses and An Algorithm [51.85289816613351]
セマンティックセグメンテーションキャリブレーションの問題について検討する。
モデルキャパシティ、作物サイズ、マルチスケールテスト、予測精度はキャリブレーションに影響を及ぼす。
我々は、単純で統一的で効果的なアプローチ、すなわち選択的スケーリングを提案する。
論文 参考訳(メタデータ) (2022-12-22T22:05:16Z) - Amortized Conditional Normalized Maximum Likelihood: Reliable Out of
Distribution Uncertainty Estimation [99.92568326314667]
本研究では,不確実性推定のための拡張性のある汎用的アプローチとして,償却条件正規化最大値(ACNML)法を提案する。
提案アルゴリズムは条件付き正規化最大度(CNML)符号化方式に基づいており、最小記述長の原理に従って最小値の最適特性を持つ。
我々は、ACNMLが、分布外入力のキャリブレーションの観点から、不確実性推定のための多くの手法と好意的に比較することを示した。
論文 参考訳(メタデータ) (2020-11-05T08:04:34Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。