論文の概要: Minimal Markovization via Stable Quotients in Holonomy-Cover Decision Processes
- arxiv url: http://arxiv.org/abs/2607.27132v1
- Date: Wed, 29 Jul 2026 17:03:35 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-07-30 21:06:25.748225
- Title: Minimal Markovization via Stable Quotients in Holonomy-Cover Decision Processes
- Title(参考訳): ホロノミー・コーバー決定過程における安定成分による最小マルコフ化
- Abstract要約: 可視的ダイナミクスがRLであり、実現された可視的遷移がすべて、固定的な置換を隠れモードに適用する構造化されたPOMDPクラスについて述べる。
我々は、現在の観測と安定クラスのペアが、完全に有限なマルコフ状態を形成することを証明している。
実験では、原状態から商状態への正確な圧縮を回復し、3つの決定時間メモリ状態で完全なペア順序精度を達成する。
- 参考スコア(独自算出の注目度): 13.539613784615605
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: An agent acting under partial observability must retain a recursively updateable statistic of history that restores the Markov property, but the smallest such statistic is generally unknown. We characterize this minimal Markov sufficient statistic for holonomy-cover decision processes, a structured POMDP class in which the visible dynamics are Markov and every realized visible transition applies a fixed permutation to a hidden mode. In particular, we construct the stable quotient, the coarsest observation-wise abstraction preserving one-step rewards and quotient successors, and prove that the pair of the current observation and stable class forms an exact finite Markov state. When the current class is correctly initialized, exact class tracking requires exactly the minimal memory symbols, in the sense that under reachability and pairwise decision separation at a maximizing observation, no arbitrary finite-memory controller can use fewer. Under resettable diagnostics, nearest-prototype class inference has exponentially decaying error, and a calibrate-then-restart reduction transfers finite-MDP guarantees to the recovered state. The results enable \emph{Holonomy Memory Reinforcement Learning}. It represents memory by the current stable class, updates it through ordered edge transports, identifies local class coordinates when diagnostics are available, and applies a standard finite-MDP RL backbone after synchronization. Experiments recover an exact compression from raw states to quotient states and achieve perfect paired-order accuracy with three decision-time memory states, matching the quotient oracle and outperforming the non-oracle baselines.
- Abstract(参考訳): 部分可観測性の下で作用するエージェントは、マルコフ特性を復元する再帰的に更新可能な歴史統計を保持する必要があるが、そのような最小の統計は一般には知られていない。
我々はこの最小限のマルコフ統計をホロノミー被覆決定過程 (holonomy-cover decision process) において、可視ダイナミクスがマルコフであり、すべての実現可能な可視遷移が固定的な置換を隠れモードに適用する構造化POMDPクラスとして特徴づける。
特に、一段階の報酬と商継承を保存した最も粗い観測的抽象化である安定商を構築し、現在の観測と安定クラスのペアが完全に有限なマルコフ状態を形成することを証明する。
現在のクラスが正しく初期化されている場合、正確なクラス追跡は最小限のメモリシンボルを必要とする。
リセット可能な診断の下では、最も近いプロトタイプのクラス推論は指数関数的に誤差を減少させ、キャリブレート-then-restart還元は有限MDP保証を回復状態に転送する。
結果は \emph{Holonomy Memory Reinforcement Learning} を可能にする。
現在の安定したクラスによってメモリを表現し、順序付けられたエッジトランスポートを通じてそれを更新し、診断が可能になったときにローカルクラス座標を特定し、同期後の標準的な有限MDP RLバックボーンを適用します。
実験では、原状態から商状態への正確な圧縮を回復し、3つの決定時間メモリ状態で完全なペア順序精度を達成する。
関連論文リスト
- Source-Free Class Relearning: Diagnosing Forgetting in Class Unlearning [22.455121713091245]
クラスアンラーニングは、モデルが保持クラスのパフォーマンスを維持しながら指定された忘れクラスを認識する能力を削除することを目的としている。
本研究では,厳密なソースフリー環境での授業再学習について検討し,未学習のモデルのみを用いて,忘れたクラスを復元できるかどうかを問う。
論文 参考訳(メタデータ) (2026-09-02T02:45:56Z) - Learning Latent Memory States from Longitudinal Athlete Monitoring Data [0.5729101515196012]
本稿では, 時系列データに対する新しい分析単位, 潜時記憶表を提案する。
主成分スコアの行列、推定ランダム効果の表、予測確率の表として、同じ足場上の再利用可能な統計対象として扱われるテーブルである。
論文 参考訳(メタデータ) (2026-08-06T17:14:54Z) - Controller-Augmented Hidden Markov Models: A Computational Framework for Constrained Sequential Inference [0.0]
本稿では Controller-Augmented Hidden Markov Models (CHMM) を提案する。
CHMMは、最小限の十分な履歴を追跡する有限状態コントローラに各制約をコンパイルするフレームワークである。
3つの実世界のシークエンスラベルタスクにおいて,CHMMを6つの代替デコーダに対して評価する。
論文 参考訳(メタデータ) (2026-06-11T19:29:09Z) - Residual-Controlled Multiplier Learning for Stochastic Constrained Decision-Making [12.04727482907937]
CMLは、ミニバッチ条件下での一次フィードバック乗算器のノイズを追跡する問題に対処する。
乗算器を有限ゲイン乗算器と原始降下のための有効圧力信号に分解する。
論文 参考訳(メタデータ) (2026-06-05T09:35:22Z) - Clipping Bottleneck: Stabilizing RLVR via Stochastic Recovery of Near-Boundary Signals [83.0127582612634]
Near-boundary Rescue (NSR) は最小限のプラグ・アンド・プレイの修正であり、失った信号を回復するために、アウト・オブ・バウンドトークンを保持する。
NSRはトレーニングの安定性を大幅に改善し、DAPOやGSPOといった強力なベースライン上で一貫したゲインを提供する。
論文 参考訳(メタデータ) (2026-05-21T16:45:31Z) - Relaxed Sparsest-Permutation Formulation for Causal Discovery at Scale [1.8160945635344523]
構造回復には正確なコレスキー分解が不要であることを示す。
緩和された定式化のスケーラブルな実装を提供するスパース・コールスキーパイプラインであるSCOPEを紹介する。
合成データセットと実データセットの実験により、SCOPE は MEC の回復精度とかなり遅いベースラインとが一致していることが示された。
論文 参考訳(メタデータ) (2026-05-07T01:20:29Z) - Learning from Emptiness: De-biasing Listwise Rerankers with Content-Agnostic Probability Calibration [76.08899010904652]
CapCalは、ランキング決定から位置バイアスを機械的に分離する、トレーニング不要のフレームワークである。
シングルパス効率を保ちながら、トレーニング不要の手法で優れた性能を発揮する。
論文 参考訳(メタデータ) (2026-04-11T10:47:22Z) - ResAD++: Towards Class Agnostic Anomaly Detection via Residual Feature Learning [52.11294707895649]
本稿では,クラス非依存型異常検出(AD)の問題点について検討する。
目的は、ターゲットデータの再トレーニングや微調整をせずに、異なるドメインから様々な新しいクラスの異常を一般化して検出できる、クラスに依存しないADモデルをトレーニングすることである。
8つの実世界のADデータセットに関する総合的な実験は、ResAD++が新しいクラスで直接使用されると、素晴らしいAD結果が得られることを示した。
論文 参考訳(メタデータ) (2025-09-28T08:41:05Z) - Post-Hoc Split-Point Self-Consistency Verification for Efficient, Unified Quantification of Aleatoric and Epistemic Uncertainty in Deep Learning [5.996056764788456]
不確実性定量化(UQ)は、信頼できる深層学習には不可欠であるが、既存の手法は計算集約的であるか、タスク固有の部分的な見積もりのみを提供する。
本研究では,事前訓練したモデルの変更や再訓練を伴わずに,アレタリックおよびてんかんの不確実性を共同でキャプチャするポストホック・シングルフォワード・パス・フレームワークを提案する。
提案手法は,EmphSplit-Point Analysis (SPA) を用いて,予測残差を上下サブセットに分解し,各側でEmphMean Absolute Residuals (MAR) を演算する。
論文 参考訳(メタデータ) (2025-09-16T17:16:01Z) - Shift Before You Learn: Enabling Low-Rank Representations in Reinforcement Learning [56.87989363424]
シフトした後継尺度において,低ランク構造が自然に現れることを示す。
有効な低ランク近似と推定に必要なシフトの量を定量化する。
論文 参考訳(メタデータ) (2025-09-05T15:48:20Z) - Rethinking Classifier Re-Training in Long-Tailed Recognition: A Simple
Logits Retargeting Approach [102.0769560460338]
我々は,クラスごとのサンプル数に関する事前知識を必要とせず,シンプルなロジットアプローチ(LORT)を開発した。
提案手法は,CIFAR100-LT, ImageNet-LT, iNaturalist 2018など,様々な不均衡データセットの最先端性能を実現する。
論文 参考訳(メタデータ) (2024-03-01T03:27:08Z) - SimPro: A Simple Probabilistic Framework Towards Realistic Long-Tailed Semi-Supervised Learning [49.94607673097326]
ラベルなしデータの分散に関する前提を前提としない、高度に適応可能なフレームワークをSimProとして提案する。
我々のフレームワークは確率モデルに基づいており、期待最大化アルゴリズムを革新的に洗練する。
本手法は,様々なベンチマークやデータ分散シナリオにまたがる一貫した最先端性能を示す。
論文 参考訳(メタデータ) (2024-02-21T03:39:04Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。