論文の概要: Self-Tuning Hamiltonian Monte Carlo for Accelerated Sampling
- arxiv url: http://arxiv.org/abs/2309.13593v2
- Date: Sun, 26 Nov 2023 13:36:57 GMT
- ステータス: 処理完了
- システム内更新日: 2023-11-30 14:35:22.560653
- Title: Self-Tuning Hamiltonian Monte Carlo for Accelerated Sampling
- Title(参考訳): 加速サンプリングのための自己調整型ハミルトンモンテカルロ
- Authors: Henrik Christiansen and Federico Errica and Francesco Alesiani
- Abstract要約: ハミルトニアンモンテカルロシミュレーションは、積分の時間ステップと積分の回数に大きく依存する。
このようなパラメータを自動的に調整する適応型汎用フレームワークを提案する。
損失と自己相関時間との良好な対応が確立できることを示す。
- 参考スコア(独自算出の注目度): 12.163119957680802
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: The performance of Hamiltonian Monte Carlo simulations crucially depends on
both the integration timestep and the number of integration steps. We present
an adaptive general-purpose framework to automatically tune such parameters,
based on a local loss function which promotes the fast exploration of
phase-space. We show that a good correspondence between loss and
autocorrelation time can be established, allowing for gradient-based
optimization using a fully-differentiable set-up. The loss is constructed in
such a way that it also allows for gradient-driven learning of a distribution
over the number of integration steps. Our approach is demonstrated for the
one-dimensional harmonic oscillator and alanine dipeptide, a small protein
common as a test case for simulation methods. Through the application to the
harmonic oscillator, we highlight the importance of not using a fixed timestep
to avoid a rugged loss surface with many local minima, otherwise trapping the
optimization. In the case of alanine dipeptide, by tuning the only free
parameter of our loss definition, we find a good correspondence between it and
the autocorrelation times, resulting in a $>100$ fold speed up in optimization
of simulation parameters compared to a grid-search. For this system, we also
extend the integrator to allow for atom-dependent timesteps, providing a
further reduction of $25\%$ in autocorrelation times.
- Abstract(参考訳): ハミルトニアンモンテカルロシミュレーションの性能は、積分の時間ステップと積分の回数の両方に大きく依存する。
本稿では,位相空間の高速探索を促進する局所損失関数に基づいて,パラメータを自動的にチューニングする適応型汎用フレームワークを提案する。
損失と自己相関時間との良好な対応が確立できることを示し、完全に微分可能なセットアップを用いた勾配に基づく最適化を実現する。
この損失は、積分ステップの数に対して分布の勾配駆動的な学習を可能にするように構成される。
本手法は,1次元高調波振動子とアラニンジペプチドに対して,シミュレーション手法のテストケースとして一般的である。
本稿では,高調波発振器の応用により,局所極小数の多い頑丈な損失面を避けるために固定時間ステップを使わないことの重要性を強調した。
アラニンジペプチドの場合、損失定義の唯一の自由パラメータをチューニングすることで、そのパラメータと自己相関時間との間に良い対応が得られ、グリッド探索と比較してシミュレーションパラメータの最適化において100ドル以上の速度が向上する。
このシステムでは、インテグレータを拡張して原子依存のタイムステップを可能にし、自動相関時間でさらに25\%のコストを削減します。
関連論文リスト
- Accelerating Real-Time Coupled Cluster Methods with Single-Precision
Arithmetic and Adaptive Numerical Integration [3.469636229370366]
単精度算術は,実時間シミュレーションの記憶コストと乗算コストを約2倍に削減することを示した。
水クラスターの試験シミュレーションにおいて, 最大14因子のさらなる高速化は, 素直な実装によって得られる。
論文 参考訳(メタデータ) (2022-05-10T21:21:49Z) - Spatio-Temporal Variational Gaussian Processes [26.60276485130467]
時空間フィルタリングと自然変動推論を組み合わせたガウス過程推論にスケーラブルなアプローチを導入する。
還元された誘導点集合上で状態空間モデルを構成するスパース近似を導出する。
分離可能なマルコフカーネルの場合、完全スパースケースは標準変分GPを正確に回復する。
論文 参考訳(メタデータ) (2021-11-02T16:53:31Z) - An automatic differentiation system for the age of differential privacy [65.35244647521989]
Tritiumは、微分プライベート(DP)機械学習(ML)のための自動微分ベース感度分析フレームワークである
我々は、微分プライベート(DP)機械学習(ML)のための自動微分に基づく感度分析フレームワークTritiumを紹介する。
論文 参考訳(メタデータ) (2021-09-22T08:07:42Z) - Differentiable Annealed Importance Sampling and the Perils of Gradient
Noise [68.44523807580438]
Annealed importance sample (AIS) と関連するアルゴリズムは、限界推定のための非常に効果的なツールである。
差別性は、目的として限界確率を最適化する可能性を認めるため、望ましい性質である。
我々はメトロポリス・ハスティングスのステップを放棄して微分可能アルゴリズムを提案し、ミニバッチ計算をさらに解き放つ。
論文 参考訳(メタデータ) (2021-07-21T17:10:14Z) - Accurate methods for the analysis of strong-drive effects in parametric
gates [94.70553167084388]
正確な数値と摂動解析手法を用いて効率的にゲートパラメータを抽出する方法を示す。
我々は,$i$SWAP, Control-Z, CNOT など,異なる種類のゲートに対する最適操作条件を同定する。
論文 参考訳(メタデータ) (2021-07-06T02:02:54Z) - Improving the Transient Times for Distributed Stochastic Gradient
Methods [5.215491794707911]
拡散適応段階法(EDAS)と呼ばれる分散勾配アルゴリズムについて検討する。
EDASが集中勾配降下(SGD)と同じネットワーク独立収束率を達成することを示す。
我々の知る限り、EDASは$n$のコスト関数の平均が強い凸である場合に最も短い時間を達成する。
論文 参考訳(メタデータ) (2021-05-11T08:09:31Z) - DiffPD: Differentiable Projective Dynamics with Contact [65.88720481593118]
DiffPDは、暗黙の時間積分を持つ効率的な微分可能なソフトボディシミュレータである。
我々はDiffPDの性能を評価し,様々な応用における標準ニュートン法と比較して4~19倍のスピードアップを観測した。
論文 参考訳(メタデータ) (2021-01-15T00:13:33Z) - Accelerated, Optimal, and Parallel: Some Results on Model-Based
Stochastic Optimization [33.71051480619541]
凸最適化問題を解決するためのモデルベース手法の近似近位点(aProx)ファミリを拡張します。
我々は、非漸近収束保証と、ミニバッチサイズの線形スピードアップを提供する加速スキームを提供する。
我々は,「補間」問題に対する新しい基本定数を同定し,収束率の改善と下界の整合性を示す。
論文 参考訳(メタデータ) (2021-01-07T18:58:39Z) - Fast and differentiable simulation of driven quantum systems [58.720142291102135]
我々は、ダイソン展開に基づく半解析手法を導入し、標準数値法よりもはるかに高速に駆動量子系を時間発展させることができる。
回路QEDアーキテクチャにおけるトランスモン量子ビットを用いた2量子ゲートの最適化結果を示す。
論文 参考訳(メタデータ) (2020-12-16T21:43:38Z) - Self-Tuning Stochastic Optimization with Curvature-Aware Gradient
Filtering [53.523517926927894]
サンプルごとのHessian-vector積と勾配を用いて、自己チューニングの二次構造を構築する。
モデルに基づく手続きが雑音勾配設定に収束することを証明する。
これは自己チューニング二次体を構築するための興味深いステップである。
論文 参考訳(メタデータ) (2020-11-09T22:07:30Z) - Convergence and sample complexity of gradient methods for the model-free
linear quadratic regulator problem [27.09339991866556]
本稿では,コントローラの空間を直接探索することにより,未知の計算系に対する最適制御を求める。
我々は、安定化フィードバックゲインの勾配-フローのダイナミクスセットに焦点をあてて、そのような手法の性能と効率を最小化するための一歩を踏み出した。
論文 参考訳(メタデータ) (2019-12-26T16:56:59Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。