論文の概要: Non-Ergodic Markovian Mirror Descent with Unbounded Noise
- arxiv url: http://arxiv.org/abs/2610.34433v1
- Date: Sun, 25 Oct 2026 16:40:13 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-27 22:27:13.614174
- Title: Non-Ergodic Markovian Mirror Descent with Unbounded Noise
- Title(参考訳): 非有界雑音による非エルゴディックマルコフ鏡の輝き
- Abstract要約: マルコフ雑音を分解し、正規性とモーメント条件下でその寄与を制御する。
我々は、適切な選択されたステップサイズに対して、重み付き平均イテレートの期待される最適下限ギャップに$O(T-1/2)$を定めている。
- 参考スコア(独自算出の注目度): 5.060311579454384
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: We analyze stochastic mirror descent for minimizing a convex objective expressed as an expectation under the stationary distribution of a Markov chain, using noisy subgradient observations along a single sample path. Through Poisson's equation, we decompose the Markovian noise and control its contribution under regularity and moment conditions that allow the stochastic subgradients and the Poisson solution to be unbounded across the state space. We establish an $O(T^{-1/2})$ bound on the expected suboptimality gap of the weighted-average iterate for an appropriately chosen step size. The analysis does not require aperiodicity or convergence of the chain's marginal distributions to stationarity. For irreducible finite-state chains, we verify the required conditions on the Poisson solution and derive explicit bounds that quantify the effect of periodicity. For irreducible countable-state chains, we verify the required regularity and moment conditions under a geometric Lyapunov drift condition and suitable growth bounds on the stochastic subgradients.
- Abstract(参考訳): マルコフ連鎖の定常分布下で表現される凸目標を最小化するための確率的ミラー降下法を, 1つのサンプル経路に沿った雑音的な下降観測を用いて解析した。
ポアソンの方程式を通じて、マルコフ雑音を分解し、その寄与を正則性およびモーメント条件の下で制御し、確率的次数分解とポアソン解を状態空間全体に非有界にすることができる。
我々は、適切な選択されたステップサイズに対して、重み付き平均イテレートの期待される最適下限ギャップに$O(T^{-1/2})$を定めている。
この解析は鎖の辺分布の周期性や収束を定常性に必要としない。
既約有限状態鎖に対しては、ポアソン解の要求条件を検証し、周期性の効果を定量化する明示的境界を導出する。
可算な可算鎖に対しては、幾何学的リアプノフドリフト条件の下で必要となる正則性とモーメント条件、および確率的下勾配上の適切な成長境界を検証する。
関連論文リスト
- Finite-Sample Approximation of Hessian-Guided Perturbed Wasserstein Gradient Flows [52.91692927889604]
累積曲率の明示的条件を満たす基準経路に対する高確率事象に対する目標値追跡境界を証明した。
また、分散余剰コサインモデル回復の条件を検証した結果、確率の増大が保証される。
論文 参考訳(メタデータ) (2026-10-07T15:13:56Z) - Convergence Analysis of Nyström Subsampling in Covariate Shift Adaptation for Misspecified case [0.0]
我々は、ターゲット関数が再生カーネルヒルベルト空間の外側にある低滑らか性(不特定)の場合に焦点を当てる。
ティホノフ正則化とNystrm射影を部分サンプリング部分空間に組み合わせることで、高い確率で保持される余剰リスクの上限を得る。
解析は、ターゲットとソースの辺分布の間のラドン-ニコディム微分が未知な設定にまで拡張する。
論文 参考訳(メタデータ) (2026-06-20T23:11:59Z) - Stabilizing Fixed-Point Iteration for Markov Chain Poisson Equations [49.702772230127465]
有限状態マルコフ鎖を$n$状態と遷移行列$P$で研究する。
すべての非退化モードが実周辺不変部分空間 $mathcalK(P)$ によってキャプチャされ、商空間 $mathbbRn/mathcalK(P) 上の誘導作用素が厳密に収縮し、ユニークな商解が得られることを示す。
論文 参考訳(メタデータ) (2026-01-31T02:57:01Z) - Revisiting Zeroth-Order Optimization: Minimum-Variance Two-Point Estimators and Directionally Aligned Perturbations [57.179679246370114]
乱摂動の分布は, 摂動段差がゼロになる傾向にあるため, 推定子の分散を最小限に抑える。
以上の結果から, 一定の長さを維持するのではなく, 真の勾配に方向を合わせることが可能であることが示唆された。
論文 参考訳(メタデータ) (2025-10-22T19:06:39Z) - Tamed Langevin sampling under weaker conditions [27.872857402255775]
ログコンケーブではなく,弱い散逸性しか持たない分布から抽出する問題について検討する。
そこで本研究では,対象分布の成長と崩壊特性に合わせたテイミング手法を提案する。
提案したサンプルに対して,Kulback-Leiblerの発散,全変動,ワッサーシュタイン距離といった条件で明確な非漸近保証を与える。
論文 参考訳(メタデータ) (2024-05-27T23:00:40Z) - Adaptive Annealed Importance Sampling with Constant Rate Progress [68.8204255655161]
Annealed Importance Smpling (AIS)は、抽出可能な分布から重み付けされたサンプルを合成する。
本稿では,alpha$-divergencesに対する定数レートAISアルゴリズムとその効率的な実装を提案する。
論文 参考訳(メタデータ) (2023-06-27T08:15:28Z) - Convergence and concentration properties of constant step-size SGD
through Markov chains [0.0]
定常段差勾配勾配(SGD)を用いた滑らかで強凸な目標の最適化について検討する。
緩やかに制御された分散を伴う不偏勾配推定に対して、反復は全変動距離の不変分布に収束することを示す。
全ての結果は無症状であり、その結果はいくつかのアプリケーションを通して議論されている。
論文 参考訳(メタデータ) (2023-06-20T12:36:28Z) - A Local Convergence Theory for the Stochastic Gradient Descent Method in
Non-Convex Optimization With Non-isolated Local Minima [0.0]
非孤立ミニマは、未探索のままのユニークな挑戦を示す。
本稿では, 勾配降下法の非溶解大域ミニマへの局所収束について検討する。
論文 参考訳(メタデータ) (2022-03-21T13:33:37Z) - Unadjusted Langevin algorithm for sampling a mixture of weakly smooth
potentials [0.0]
我々は,ポアンカーの不等式や球体の外側の非強凸の下での収束保証を証明した。
また、滑らかなポテンシャルに対する$L_beta$-Wasserstein 計量の収束も提供する。
論文 参考訳(メタデータ) (2021-12-17T04:10:09Z) - Spectral clustering under degree heterogeneity: a case for the random
walk Laplacian [83.79286663107845]
本稿では,ランダムウォークラプラシアンを用いたグラフスペクトル埋め込みが,ノード次数に対して完全に補正されたベクトル表現を生成することを示す。
次数補正ブロックモデルの特別な場合、埋め込みはK個の異なる点に集中し、コミュニティを表す。
論文 参考訳(メタデータ) (2021-05-03T16:36:27Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。