論文の概要: Metropolis Monte Carlo sampling: convergence, localization transition
and optimality
- arxiv url: http://arxiv.org/abs/2207.10488v4
- Date: Sat, 15 Apr 2023 22:35:54 GMT
- ステータス: 処理完了
- システム内更新日: 2023-04-19 00:35:36.880595
- Title: Metropolis Monte Carlo sampling: convergence, localization transition
and optimality
- Title(参考訳): メトロポリスモンテカルロサンプリング:収束、局在化遷移および最適性
- Authors: Alexei D. Chepelianskii, Satya N. Majumdar, Hendrik Schawe and
Emmanuel Trizac
- Abstract要約: 目標定常分布からの偏差は局所化遷移を特徴とすることを示す。
局所化移行前後の緩和は拡散率と拒絶率によってそれぞれ制限されていると論じる。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Among random sampling methods, Markov Chain Monte Carlo algorithms are
foremost. Using a combination of analytical and numerical approaches, we study
their convergence properties towards the steady state, within a random walk
Metropolis scheme. Analysing the relaxation properties of some model algorithms
sufficiently simple to enable analytic progress, we show that the deviations
from the target steady-state distribution can feature a localization transition
as a function of the characteristic length of the attempted jumps defining the
random walk. While the iteration of the Monte Carlo algorithm converges to
equilibrium for all choices of jump parameters, the localization transition
changes drastically the asymptotic shape of the difference between the
probability distribution reached after a finite number of steps of the
algorithm and the target equilibrium distribution. We argue that the relaxation
before and after the localisation transition is respectively limited by
diffusion and rejection rates.
- Abstract(参考訳): ランダムサンプリング法のうち、マルコフ・チェイン・モンテカルロアルゴリズムが最も多い。
解析的および数値的アプローチの組み合わせを用いて、ランダムウォークメトロポリススキームにおいて、それらの収束特性を定常状態に向けて研究する。
解析的な進行を可能にするためにモデルアルゴリズムの緩和特性を十分に簡易に解析し、目標定常分布からの偏差がランダムウォークを定義するジャンプの特性長の関数として局所化遷移を特徴付けることを示した。
モンテカルロアルゴリズムの反復はジャンプパラメータのすべての選択に対して平衡に収束するが、局所化遷移はアルゴリズムの有限ステップ後に到達した確率分布と目標平衡分布との差の漸近的な形状を劇的に変化させる。
局所化移行前後の緩和は拡散率と拒絶率によってそれぞれ制限されていると論じる。
関連論文リスト
- Convergence rate of random scan Coordinate Ascent Variational Inference under log-concavity [0.18416014644193066]
Coordinate Ascent Variational Inference schemeは、関心の確率分布の平均場近似を計算するために使われる一般的なアルゴリズムである。
対象密度の対数共共振仮定に基づいてランダムスキャンバージョンを解析する。
論文 参考訳(メタデータ) (2024-06-11T14:23:01Z) - Distributed Markov Chain Monte Carlo Sampling based on the Alternating
Direction Method of Multipliers [143.6249073384419]
本論文では,乗算器の交互方向法に基づく分散サンプリング手法を提案する。
我々は,アルゴリズムの収束に関する理論的保証と,その最先端性に関する実験的証拠の両方を提供する。
シミュレーションでは,線形回帰タスクとロジスティック回帰タスクにアルゴリズムを配置し,その高速収束を既存の勾配法と比較した。
論文 参考訳(メタデータ) (2024-01-29T02:08:40Z) - Robust scalable initialization for Bayesian variational inference with
multi-modal Laplace approximations [0.0]
フル共分散構造を持つ変分混合は、パラメータ数による変動パラメータによる二次的な成長に苦しむ。
本稿では,変分推論のウォームスタートに使用できる初期ガウスモデル近似を構築する方法を提案する。
論文 参考訳(メタデータ) (2023-07-12T19:30:04Z) - Adaptive Annealed Importance Sampling with Constant Rate Progress [68.8204255655161]
Annealed Importance Smpling (AIS)は、抽出可能な分布から重み付けされたサンプルを合成する。
本稿では,alpha$-divergencesに対する定数レートAISアルゴリズムとその効率的な実装を提案する。
論文 参考訳(メタデータ) (2023-06-27T08:15:28Z) - On the Convergence of Stochastic Extragradient for Bilinear Games with
Restarted Iteration Averaging [96.13485146617322]
本稿では, ステップサイズが一定であるSEG法の解析を行い, 良好な収束をもたらす手法のバリエーションを示す。
平均化で拡張した場合、SEGはナッシュ平衡に確実に収束し、スケジュールされた再起動手順を組み込むことで、その速度が確実に加速されることを証明した。
論文 参考訳(メタデータ) (2021-06-30T17:51:36Z) - Determination of the critical exponents in dissipative phase
transitions: Coherent anomaly approach [51.819912248960804]
オープン量子多体系の定常状態に存在する相転移の臨界指数を抽出するコヒーレント異常法の一般化を提案する。
論文 参考訳(メタデータ) (2021-03-12T13:16:18Z) - Sampling in Combinatorial Spaces with SurVAE Flow Augmented MCMC [83.48593305367523]
ハイブリッドモンテカルロ(Hybrid Monte Carlo)は、複素連続分布からサンプリングする強力なマルコフ連鎖モンテカルロ法である。
本稿では,SurVAEフローを用いたモンテカルロ法の拡張に基づく新しい手法を提案する。
本稿では,統計学,計算物理学,機械学習など,様々な分野におけるアルゴリズムの有効性を実証し,代替アルゴリズムと比較した改良点を考察する。
論文 参考訳(メタデータ) (2021-02-04T02:21:08Z) - A Distributional Analysis of Sampling-Based Reinforcement Learning
Algorithms [67.67377846416106]
定常ステップサイズに対する強化学習アルゴリズムの理論解析に対する分布的アプローチを提案する。
本稿では,TD($lambda$)や$Q$-Learningのような値ベースの手法が,関数の分布空間で制約のある更新ルールを持つことを示す。
論文 参考訳(メタデータ) (2020-03-27T05:13:29Z) - Stochastic Normalizing Flows [2.323220706791067]
単純な事前分布の変換を学習するために,フローの正規化が有効であることを示す。
サンプルとフローパラメータの両方をエンドツーエンドに最適化できる効率的なトレーニング手順を導出する。
いくつかのベンチマークでSNFの表現力,サンプリング効率,正当性について述べる。
論文 参考訳(メタデータ) (2020-02-16T23:29:32Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。