論文の概要: Foresight: Learning Twisted SMC for Rare Events from Reversed Relaxations
- arxiv url: http://arxiv.org/abs/2611.00903v1
- Date: Sat, 31 Oct 2026 13:01:18 GMT
- ステータス: 情報取得中
- システム内更新日: 2026-11-03 19:35:58.067779
- Title: Foresight: Learning Twisted SMC for Rare Events from Reversed Relaxations
- Title(参考訳): Foresight: 逆緩和によるレアイベントのためのツイストSMCの学習
- Abstract要約: 可逆マルコフ連鎖が集合$A$で始まる確率は、固定された地平線の後、稀な集合$B$である。
ターゲット側から両方のコンポーネントを学習するForesight-SMCを紹介します。
- 参考スコア(独自算出の注目度): 8.633233124702697
- License:
- Abstract: We consider the probability that a reversible Markov chain started in a set $A$ is in a rare set $B$ after a fixed horizon, a quantity often needed for many start laws, down to single states. Twisted sequential Monte Carlo (SMC) estimates such probabilities without bias, with small variance when its proposal and twist approximate the dynamics conditioned on reaching $B$, but these components are usually learned from forward simulations, which contain almost no successful paths when the event is rare. We introduce Foresight-SMC, which learns both components from the target side: under reversibility, relaxations started in $B$ that return to $A$ are, read backwards, exact samples of the conditioned paths, and their number is governed by the return probability rather than by the rare probability. Extending this reversal to the recorded propose--accept decisions of a Metropolis-adjusted sampler, we fit a controlled Langevin proposal with exact likelihood ratios by maximum likelihood, together with a classifier twist; the resulting estimator is unbiased for any start law. A variance analysis shows that resampling reduces the variance when the importance weights degenerate, as they do over long horizons. On an Allen--Cahn field, the learned proposal alone suffices, and one trained model is more accurate than splitting at equal cost. On alanine tripeptide, resampling with the learned twist is necessary, and Foresight-SMC needs less computation per query than adaptive multilevel splitting on localized start sets.
- Abstract(参考訳): 可逆マルコフ連鎖が集合$A$で始まる確率は、固定された地平線の後、まれな集合$B$であり、多くの開始法則において必要となる量である。
ツイスト・シーケンシャルモンテカルロ (SMC) は、その提案とツイストが$B$に達すると条件付けられた力学を近似すると、バイアスのないそのような確率を小さなばらつきで推定するが、これらの成分は通常前方シミュレーションから学習される。
可逆性の下では、$B$から$A$に返却された緩和が始まり、後戻り、条件付きパスの正確なサンプルが読み込まれ、それらの数は稀な確率ではなく返却確率によって支配される。
この逆転を、メトロポリス調整サンプリング機の記録された提案-受容決定に拡張し、制御されたランゲヴィンの提案に、最大極度で正確な確率比と分類器のツイストを適合させ、その結果の推定子は任意の開始法に偏らない。
分散解析により、再サンプリングは、重みが長い地平線上で行うように縮退するときに分散を減少させることを示す。
アレン-カーンの分野では、学習された提案だけで十分であり、訓練された1つのモデルは等しいコストで分割するよりも正確である。
アラニントリペプチドでは、学習されたツイストによる再サンプリングが必要であり、Foresight-SMCは局所化開始セット上での適応的マルチレベル分割よりもクエリ毎の計算が少ない。
関連論文リスト
- Decoupled Marginal Sharpening for Training-Free Inference-Time Scaling [19.842727659343797]
モデル重みを更新したり、外部報酬モデルを使用したりすることなく、推定時間でのLLM推論を改善する方法について検討する。
本稿では、モデルが特定の推論経路をどれだけ強く好むかを個別に制御するDecoupled Margin Sharpening (DMS)を提案する。
DMSは、すべてのタスクで比較されたメソッドの中で、最も平均パス@1を達成する。
論文 参考訳(メタデータ) (2026-10-14T16:55:22Z) - Robust Average-Reward Markov Decision Processes: Minimax-Optimal Learning via Plug-in Reductions [51.50375419691955]
分布的に堅牢なマルコフ決定プロセスは、モデルの不確実性の下でのシーケンシャルな意思決定のための原則化されたフレームワークを提供する。
我々は,平均回帰基準の下で,$varepsilon$-Optimal robust policyを学習するのに必要なサンプル数と十分なサンプル数について検討した。
論文 参考訳(メタデータ) (2026-08-06T19:49:48Z) - Learning with a Single Rollout via Monte Carlo Pass@k Critic [41.21709991031287]
拡張学習におけるトークンレベルの利点を推定することは、エピソード体験コレクションのスケールアップが高価であるため困難である。
言語モデルのためのRLにおけるトークンレベルの信用代入を特徴とする単一ロールアウトポリシ最適化について検討する。
SR-PPOは、Pass@128の成功率の連続的な上昇とともに、安定した学習力学を示すことを示す。
論文 参考訳(メタデータ) (2026-06-24T06:26:34Z) - Is Spurious Correlation Removal Always Learnable? [56.28155520961125]
不変学習は、構造が統計的に識別可能であっても失敗することがある。
ブラックボックスサンプリング可能な教師付きスパースリカバリプリミティブの下では、実証可能な多次元環境が存在する。
合成および実際のデータセットは、予測されたギャップと遷移を示し、単純な多様性診断を動機付ける。
論文 参考訳(メタデータ) (2026-06-11T05:49:43Z) - Reinforcement Learning from Multi-Source Imperfect Preferences: Best-of-Both-Regimes Regret [71.69884486156359]
我々は, 累積的不完全化予算を用いて, エンフルティソースの不完全性選好からエピソードRLを考察した。
我々は,最良な登録行動を示す,後悔$tildeO(sqrtK/M+)$の統一アルゴリズムを提案する。
論文 参考訳(メタデータ) (2026-03-20T19:34:53Z) - Optimal Unconstrained Self-Distillation in Ridge Regression: Strict Improvements, Precise Asymptotics, and One-Shot Tuning [61.07540493350384]
自己蒸留(英: Self-distillation, SD)とは、教師自身の予測と地道の混合で学生を訓練する過程である。
任意の予測リスクに対して、各正規化レベルにおいて、最適に混合された学生がリッジ教師に改善されることが示される。
本稿では,グリッド探索やサンプル分割,再構成なしに$star$を推定する一貫したワンショットチューニング手法を提案する。
論文 参考訳(メタデータ) (2026-02-19T17:21:15Z) - Decision from Suboptimal Classifiers: Excess Risk Pre- and Post-Calibration [52.70324949884702]
バッチ二分決定における近似的後続確率を用いた余剰リスクの定量化を行う。
我々は、再校正のみが後悔のほとんどに対処する体制と、後悔が集団的損失に支配される体制を識別する。
NLP実験では、これらの量によって、より高度なポストトレーニングの期待値が運用コストに値するかどうかが分かる。
論文 参考訳(メタデータ) (2025-03-23T10:52:36Z) - Precise Asymptotics of Bagging Regularized M-estimators [20.077783679095443]
我々は,アンサンブル推定器の正方形予測リスクを,正規化M値推定器のサブタグ化(サブサンプルブートストラップ集約)により特徴付ける。
我々の分析の鍵は、重なり合うサブサンプル上の推定値と残差との相関関係の結合挙動に関する新しい結果である。
サブサンプルサイズ,アンサンブルサイズ,正規化の併用最適化は,全データに対してのみ,正規化器の最適化を著しく上回る。
論文 参考訳(メタデータ) (2024-09-23T17:48:28Z) - Variance Reduction for the Independent Metropolis Sampler [11.074080383657453]
我々は、$pi$がKL分散の下で別の密度$q$に十分近い場合、$pi$からサンプルを得る独立したサンプリング器は、$pi$からサンプリングするi.d.よりも小さな分散を達成することを証明した。
提案手法は,KLの目標との偏差が低減されるように,提案密度に適応する適応型独立メトロポリスアルゴリズムを提案する。
論文 参考訳(メタデータ) (2024-06-25T16:38:53Z) - Predicting Rare Events by Shrinking Towards Proportional Odds [1.599072005190786]
先行段階のより豊富なデータは、希少事象の確率の推定を改善するために活用される可能性がある。
順序回帰に対する比例オッズモデルの緩和であるPRESTOを提案する。
PRESTO が決定境界重みを不規則に推定することを証明している。
論文 参考訳(メタデータ) (2023-05-30T02:50:08Z) - Breaking the Sample Complexity Barrier to Regret-Optimal Model-Free
Reinforcement Learning [52.76230802067506]
漸進的強化学習における後悔を最小限に抑えるために,新しいモデルフリーアルゴリズムを提案する。
提案アルゴリズムは、2つのQ-ラーニングシーケンスの助けを借りて、初期設定された参照更新ルールを用いる。
初期の分散還元法の設計原理は、他のRL設定とは独立した関心を持つかもしれない。
論文 参考訳(メタデータ) (2021-10-09T21:13:48Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。