論文の概要: Minimax estimation of the pseudo-spectral gap of continuous Markov chains, with applications to empirical concentration bounds
- arxiv url: http://arxiv.org/abs/2610.20007v1
- Date: Wed, 14 Oct 2026 11:22:54 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-15 21:06:16.122623
- Title: Minimax estimation of the pseudo-spectral gap of continuous Markov chains, with applications to empirical concentration bounds
- Title(参考訳): 連続マルコフ鎖の擬スペクトルギャップのミニマックス推定と経験的濃度境界への応用
- Abstract要約: マルコフ連鎖の擬スペクトルギャップ$_ps$のミニマックス推定を単一軌道の観測から検討した。
我々の推定子は、リプシッツ密度を持つ遷移作用素を持つ鎖のクラスにおいて、対数項まで極小極小であるように見える。
- 参考スコア(独自算出の注目度): 3.5965044619608597
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We study the minimax estimation of the pseudo-spectral gap $γ_{ps}$ of a Markov chain from the observation of a single trajectory. Extending earlier works on finite-state space chains by Wolfer and Kontorovich (2024), we provide an estimator in the case of a compact, continuous state-space. Our estimator appears to be minimax-optimal on the class of chains with a transition operator with Lipschitz density, up to logarithmic terms. Our estimator, combined with Paulin's version of Bernstein inequality, allows to derive empirical concentration inequalities for Markov chains. This unlocks many applications, from confidence intervals, to active learning and generalization bounds. In particular, for rested bandits with Markov rewards, we provide a version of UCB with a regret bound similar to the one in the iid case, without assuming any knowledge on the pseudo-spectral gap of the chains.
- Abstract(参考訳): 単一軌道の観測から,擬スペクトルギャップ$γ_{ps}$の最小値推定について検討した。
Wolfer と Kontorovich (2024) による有限状態空間鎖に関する以前の研究を拡張して、コンパクトで連続な状態空間の場合の推定器を提供する。
我々の推定子は、リプシッツ密度を持つ遷移作用素を持つ鎖のクラスにおいて、対数項まで極小極小であるように見える。
我々の推定器は、パウリンのベルンシュタインの不等式のバージョンと組み合わせて、マルコフ連鎖に対する経験的濃度の不等式を導出することができる。
これにより、信頼区間からアクティブラーニングや一般化バウンダリまで、多くのアプリケーションがアンロックされる。
特に、マルコフの報酬を持つ安楽死包帯に対しては、鎖の擬スペクトルギャップに関する知識を仮定することなく、iid の場合と同様の後悔境界を持つ UCB の版を提供する。
関連論文リスト
- Operational meaning of Markov gap in tripartite entanglement of quantum dynamics [3.6095616816136062]
自由フェルミオン鎖における既約三部構造絡み(IrTE)のプローブとしてのマルコフギャップに着目した。
マルコフギャップは, 時間スケール$tsim! L2$で体積-法則値に飽和することを示す。
論文 参考訳(メタデータ) (2026-07-09T15:47:51Z) - Near-Optimal Clustering in Mixture of Markov Chains [74.3828414695655]
我々は、長さ$H$の軌跡を、大きさ$S$の有限状態空間上の未知のエルゴードマルコフ鎖の1つによって生成される、$T$ trajectories of length $H$の問題を研究する。
我々は、連鎖の遷移核間の重み付きKL分散によって支配されるクラスタリングエラー率に基づいて、インスタンス依存で高い確率の低い境界を導出する。
次に,新しい2段階クラスタリングアルゴリズムを提案する。
論文 参考訳(メタデータ) (2025-06-02T05:10:40Z) - A note on concentration inequalities for the overlapped batch mean variance estimators for Markov chains [17.628247025892215]
Atchad'e と Cattaneo 2014 が導入した Martingale 分解法を用いて,マルコフ鎖に付随する二次構造の濃度特性について検討した。
我々の主な結果は、OBM推定器とマルコフ連鎖のばらつきの差の$p$-thのモーメントを明示的に制御することである。
論文 参考訳(メタデータ) (2025-05-13T11:36:04Z) - Fast Convergence of $Φ$-Divergence Along the Unadjusted Langevin Algorithm and Proximal Sampler [14.34147140416535]
連続空間における2つの一般的な離散時間マルコフ連鎖の混合時間について検討する。
二つの微分可能な厳密凸函数から生じる任意の$Phi$-divergenceが、これらのマルコフ連鎖に沿って指数的に0$に収束することを示す。
論文 参考訳(メタデータ) (2024-10-14T16:41:45Z) - Ito Diffusion Approximation of Universal Ito Chains for Sampling, Optimization and Boosting [64.0722630873758]
我々は、ある微分方程式のオイラー・マルヤマ離散化のように見える、より一般で幅広いマルコフ連鎖、伊藤鎖を考える。
伊藤鎖の法則と微分方程式の間の$W_2$-距離の有界性を証明する。
論文 参考訳(メタデータ) (2023-10-09T18:38:56Z) - Hoeffding's Inequality for Markov Chains under Generalized
Concentrability Condition [15.228649445346473]
本稿では,積分確率計量(IPM)によって定義される一般化可積分性条件下でのマルコフ鎖の不等式について検討する。
我々のフレームワークの柔軟性により、伝統的な意味でのエルゴード的マルコフ連鎖を超えて、ホーフディングの不等式を適用することができる。
論文 参考訳(メタデータ) (2023-10-04T16:21:23Z) - Optimal variance-reduced stochastic approximation in Banach spaces [114.8734960258221]
可分バナッハ空間上で定義された収縮作用素の定点を推定する問題について検討する。
演算子欠陥と推定誤差の両方に対して漸近的でない境界を確立する。
論文 参考訳(メタデータ) (2022-01-21T02:46:57Z) - Optimal policy evaluation using kernel-based temporal difference methods [78.83926562536791]
カーネルヒルベルト空間を用いて、無限水平割引マルコフ報酬過程の値関数を推定する。
我々は、関連するカーネル演算子の固有値に明示的に依存した誤差の非漸近上界を導出する。
MRP のサブクラスに対する minimax の下位境界を証明する。
論文 参考訳(メタデータ) (2021-09-24T14:48:20Z) - Empirical and Instance-Dependent Estimation of Markov Chain and Mixing
Time [5.167069404528051]
本稿では,マルコフ連鎖の混合時間を1つの観測軌道から推定する問題に対処する。
ヒルベルト空間法を用いてスペクトルギャップを推定する以前の多くの研究とは異なり、全変動に対する収縮に基づくアプローチを選択する。
この量はスペクトルギャップとは異なり、強い普遍定数まで混合時間を制御し、可逆鎖にも適用できる。
論文 参考訳(メタデータ) (2019-12-14T13:38:02Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。