論文の概要: Unified Optimality Conditions for Stochastic Optimal Control in the Rough Path and Itô Frameworks
- arxiv url: http://arxiv.org/abs/2609.38395v1
- Date: Tue, 29 Sep 2026 18:52:37 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-01 18:57:26.616732
- Title: Unified Optimality Conditions for Stochastic Optimal Control in the Rough Path and Itô Frameworks
- Title(参考訳): ラフパスとイトーフレームワークにおける確率的最適制御のための統一最適条件
- Abstract要約: We show that the adjoint equations of the It and rough PMPs are connected through the conditional expectation $p_ttextIt=mathbbE[p_ttextrough mid mathcalF_t]$。
- 参考スコア(独自算出の注目度): 0.565658124285176
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: Stochastic differential equations (SDEs) can be studied via Itô calculus and rough path theory. For stochastic optimal control, these two frameworks give distinct Pontryagin Maximum Principle (PMP) optimality conditions with forward-backward SDEs (FBSDEs) or rough differential equations. We show that the adjoint equations of the Itô and rough PMPs are connected via the conditional expectation $p_t^{\text{Itô}}=\mathbb{E}[p_t^{\text{rough}} \mid \mathcal{F}_t]$, where $\mathcal{F}_t$ represents information available at time $t$. First, we derive a rough stochastic PMP for problems with adapted controls that does not use FBSDEs. Its proof extends the rough stochastic PMP over deterministic controls by considering stochastic needle variations. Second, we derive a unified PMP connecting the Itô and rough PMPs, using Itô-Stratonovich conversion formulas and duality identities between the forward tangent and backward adjoint SDEs. As a first application, we rederive the adjoint matching method for fine-tuning generative models. As a second application, we propose an indirect shooting method for a class of feedback problems. Overall, these results give a new conditional bridge connecting two popular frameworks for stochastic optimal control.
- Abstract(参考訳): 確率微分方程式 (SDEs) はイトー計算と粗経路理論を通して研究することができる。
確率的最適制御のために、これらの2つのフレームワークは、前向きのSDE (FBSDEs) あるいは粗微分方程式を持つポントリャーギン最大原理 (PMP) 最適条件を与える。
アイトー方程式と粗な PMP の随伴方程式は条件付き期待式 $p_t^{\text{Itô}}=\mathbb{E}[p_t^{\text{rough}} \mid \mathcal{F}_t]$ で連結され、$\mathcal{F}_t$ は時間 $t$ で得られる情報を表す。
まず、FBSDEを使わない適応制御の問題に対して、大まかな確率的PMPを導出する。
その証明は、確率的な針のバリエーションを考慮し、決定論的制御よりも粗確率的なPMPを拡張している。
第2に、Itô-Stratonovich変換公式と前方接点と後方随伴SDEの双対恒等式を用いて、Itôと粗PMPを連結する統一PMPを導出する。
第1の応用として、微調整生成モデルに対する随伴マッチング法を改良する。
第2の応用として,フィードバック問題のクラスに対する間接的シューティング手法を提案する。
これらの結果から,確率的最適制御のための2つの一般的なフレームワークを接続する条件付きブリッジが得られた。
関連論文リスト
- Adjoint Matching through the Lens of the Stochastic Maximum Principle in Optimal Control [12.577114890059187]
拡散・流動モデルの逆微調整と傾斜あるいはボルツマンからのサンプリングは、どちらも最適制御(SOC)問題として定式化できる。
我々は、最適制御を学習するためのSOCに基づく提案手法を再検討し、それを最大原理(SMP)から導出し、厳密な足場に配置する。
反復はSMPによって誘導される連続近似の連続時間法として正確に解釈できることを示す。
論文 参考訳(メタデータ) (2026-03-28T13:01:01Z) - Covariance-Aware Transformers for Quadratic Programming and Decision Making [25.76921238593292]
行列変数をトークン化することにより、線形アテンション機構が非制約QPを確実に解けることを示す。
時系列基礎モデルを強化する汎用的な方法であるTime2Decideを紹介する。
古典的ポートフォリオ最適化問題において,Time2Decideが基本TSFMモデルより一様に優れていることがわかった。
論文 参考訳(メタデータ) (2026-02-16T06:39:24Z) - Neural Shrödinger Bridge Matching for Pansharpening [14.131205410479357]
近年,パンシャルペン分野における拡散確率モデル (DPM) が注目されている。
逆問題としてパンシャーペンのタスクに直接DPMを適用する際の欠点を同定する。
両問題に対処するSchr"odinger bridge matching法を提案する。
論文 参考訳(メタデータ) (2024-04-17T14:17:05Z) - Stochastic Optimal Control Matching [53.156277491861985]
最適制御のための新しい反復拡散最適化(IDO)技術である最適制御マッチング(SOCM)を導入する。
この制御は、一致するベクトル場に適合しようとすることで、最小二乗問題を通じて学習される。
実験により,本アルゴリズムは最適制御のための既存のすべての IDO 手法よりも低い誤差を実現する。
論文 参考訳(メタデータ) (2023-12-04T16:49:43Z) - Nonconvex Stochastic Bregman Proximal Gradient Method with Application to Deep Learning [9.202586157819693]
非合成対象函数のロバスト性を最小化する二次法は、典型的には微分可能部分のリプシッツ滑らか性に依存する。
本稿では適応性のみを考慮したBregman(SBPG)手法のファミリーを提案する。
MSBPGは運動量に基づく変種であり、ミニバッチサイズ要求を緩和することで収束感度を高める。
論文 参考訳(メタデータ) (2023-06-26T08:54:46Z) - Gradient-Free Methods for Deterministic and Stochastic Nonsmooth
Nonconvex Optimization [94.19177623349947]
非滑らかな非最適化問題は、機械学習とビジネス製造に現れる。
2つのコア課題は、有限収束を保証する効率的な方法の開発を妨げる。
GFMとSGFMの2相版も提案され, 改良された大規模評価結果が得られた。
論文 参考訳(メタデータ) (2022-09-12T06:53:24Z) - Efficiently Solving MDPs with Stochastic Mirror Descent [38.30919646721354]
線形モデルに与えられた無限水平マルコフ決定過程(MDP)を近似的に解くための統一的な枠組みを提案する。
これらの結果は、より一般的なミラー降下フレームワークを用いて、単純なドメインとボックスドメインで大域的なサドルポイント問題を解くことによって達成される。
論文 参考訳(メタデータ) (2020-08-28T17:58:40Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。