論文の概要: Accelerating Non-Smooth and Heavy-Tailed Sampling
- arxiv url: http://arxiv.org/abs/2610.11139v1
- Date: Thu, 08 Oct 2026 03:06:10 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-10 02:36:53.753838
- Title: Accelerating Non-Smooth and Heavy-Tailed Sampling
- Title(参考訳): 非平滑化と重圧サンプリングの高速化
- Abstract要約: 本研究では,非可逆アンカー型ランゲヴィンダイナミクス(NALD)を用いて,非微分可能かつ重み付きターゲット密度のサンプリングを行った。
NALDとNRALDは, 有限時間非漸近収束解析により, 対象分布に高速に収束できることを示す。
- 参考スコア(独自算出の注目度): 7.336637417508747
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Anchored Langevin dynamics (ALD) is useful for non-smooth sampling where the density of the target distribution is possibly non-differentiable and heavy-tailed; reflected anchored Langevin dynamics (RALD) can sample possibly non-differentiable target density on a constrained domain. In this paper, we propose and study non-reversible anchored Langevin dynamics (NALD) for sampling possibly non-differentiable and heavy-tailed target density in the Euclidean space and the non-reversible reflected anchored Langevin dynamics (NRALD) for sampling possibly non-differentiable target density in the constrained space. Our construction adds a circulation drift generated by a possibly state-dependent divergence-free skew-symmetric matrix field and a stream potential. It preserves the target distribution without requiring derivatives of target density, admits a random-time-change representation, and applies both on the whole Euclidean space and on bounded domains with normal reflection. By breaking reversibility, we show that NALD and NRALD can converge to their target distributions faster than their reversible counterparts via finite-time non-asymptotic convergence analysis, a large deviations analysis and asymptotic variance reduction. Numerical experiments demonstrate the efficiency of the proposed algorithms.
- Abstract(参考訳): Anchored Langevin dynamics (ALD) は、ターゲット分布の密度が非微分可能で重み付きであるような非平滑サンプリングに有用である。
本稿では, ユークリッド空間における非可逆的かつ重尾的対象密度と, 制約空間における非可逆的対象密度をサンプリングするための非可逆的アンカー型ランゲヴィン力学 (NALD) と非可逆的アンカー型ランゲヴィン力学 (NRALD) を提案する。
提案手法は, 状態依存性のないスキュー対称行列場とストリーム電位によって発生する循環ドリフトを付加する。
ターゲット密度の微分を必要とせずに対象分布を保存し、ランダム時間変化表現を認め、ユークリッド空間全体と正規反射を持つ有界領域の両方に適用する。
可逆性を破ることにより、NALDとNRALDは、有限時間非漸近収束解析、大規模な偏差解析、漸近分散低減により、可逆分布よりも高速に目標分布に収束できることを示す。
数値実験により提案アルゴリズムの有効性が示された。
関連論文リスト
- Disentangling Continuous-Time Latent Dynamics: Identifiability of Latent SDEs via Diffusion Shifts [60.95873409673775]
連続時間潜在微分方程式モデルにおける識別可能性はほとんど開のままである。
未知の非線形微分同相を通じて観測される付加ノイズ潜在SDEについて検討した。
本稿では,2段階の遅延不整合とグラフ復元のための推定器を提案する。
論文 参考訳(メタデータ) (2026-06-26T16:18:28Z) - Dimension-Free Multimodal Sampling via Preconditioned Annealed Langevin Dynamics [10.631439631816166]
Annealed Langevin dynamics (ALD) は古典的なランゲヴィンの代替として広く用いられている。
我々は,マルチモーダル目標に対する連続時間ALDの一様次元解析を提供することにより,このギャップを埋める手助けをする。
論文 参考訳(メタデータ) (2026-02-01T21:37:33Z) - Revisiting Zeroth-Order Optimization: Minimum-Variance Two-Point Estimators and Directionally Aligned Perturbations [57.179679246370114]
乱摂動の分布は, 摂動段差がゼロになる傾向にあるため, 推定子の分散を最小限に抑える。
以上の結果から, 一定の長さを維持するのではなく, 真の勾配に方向を合わせることが可能であることが示唆された。
論文 参考訳(メタデータ) (2025-10-22T19:06:39Z) - Non-Reversible Langevin Algorithms for Constrained Sampling [13.472207533177151]
本研究では,制約領域上の対象分布から標本化することを目的とする制約サンプリング問題を考察する。
SRNLD(skew-reflected non-reversible Langevin dynamics)を提案する。
我々は,SRNLDの非漸近収束速度を,全変量と1-ワッサーシュタイン距離の両方の目標分布に求める。
論文 参考訳(メタデータ) (2025-01-20T21:04:29Z) - Sampling with Adaptive Variance for Multimodal Distributions [14.121491356732188]
本研究では,有界領域に対する分布サンプリングアルゴリズムのクラスを提案し,解析する。
そこで,ギブズポテンシャルに関する情報を使わずに,導関数のないバージョンをサンプリングに利用できることを示す。
論文 参考訳(メタデータ) (2024-11-20T22:05:47Z) - Dynamical Measure Transport and Neural PDE Solvers for Sampling [77.38204731939273]
本研究では, 対象物へのトラクタブル密度関数の移動として, 確率密度からサンプリングする作業に取り組む。
物理インフォームドニューラルネットワーク(PINN)を用いて各偏微分方程式(PDE)の解を近似する。
PINNはシミュレーションと離散化のない最適化を可能にし、非常に効率的に訓練することができる。
論文 参考訳(メタデータ) (2024-07-10T17:39:50Z) - Adaptive Annealed Importance Sampling with Constant Rate Progress [68.8204255655161]
Annealed Importance Smpling (AIS)は、抽出可能な分布から重み付けされたサンプルを合成する。
本稿では,alpha$-divergencesに対する定数レートAISアルゴリズムとその効率的な実装を提案する。
論文 参考訳(メタデータ) (2023-06-27T08:15:28Z) - Convergence of mean-field Langevin dynamics: Time and space
discretization, stochastic gradient, and variance reduction [49.66486092259376]
平均場ランゲヴィンダイナミクス(英: mean-field Langevin dynamics、MFLD)は、分布依存のドリフトを含むランゲヴィン力学の非線形一般化である。
近年の研究では、MFLDは測度空間で機能するエントロピー規則化された凸関数を地球規模で最小化することが示されている。
有限粒子近似,時間分散,勾配近似による誤差を考慮し,MFLDのカオスの均一時間伝播を示す枠組みを提供する。
論文 参考訳(メタデータ) (2023-06-12T16:28:11Z) - Non-Convex Optimization via Non-Reversible Stochastic Gradient Langevin
Dynamics [27.097121544378528]
グラディエント・ランゲヴィン・ダイナミクス (Gradient Langevin Dynamics, SGLD) は、非目的勾配を最適化する強力なアルゴリズムである。
NSGLDは非可逆拡散の離散化に基づいている。
論文 参考訳(メタデータ) (2020-04-06T17:11:03Z) - Dimension-free convergence rates for gradient Langevin dynamics in RKHS [47.198067414691174]
グラディエントランゲヴィンダイナミクス(GLD)とSGLDは近年注目されている。
空間が無限次元空間であるとき、収束解析 GLD と SGLD を提供する。
論文 参考訳(メタデータ) (2020-02-29T17:14:13Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。