論文の概要: Is Variational Monte Carlo Robust? Sharp Moment Thresholds and Heavy-tailed Stochastic Optimization
- arxiv url: http://arxiv.org/abs/2606.26009v1
- Date: Wed, 24 Jun 2026 16:29:54 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-06-25 17:05:30.395811
- Title: Is Variational Monte Carlo Robust? Sharp Moment Thresholds and Heavy-tailed Stochastic Optimization
- Title(参考訳): モンテカルロロロバスト変分か?シャープモーメント閾値と重み付き確率最適化
- Abstract要約: 変分カルロ (VMC) は電子構造理論における中心的なアルゴリズムである。
本研究では,結果の最適化問題は波動関数の結節幾何学によって本質的に制御されていることを示す。
局所エネルギーとランダム変数の両方をクリッピングしたVMCのロバストな新しい変種を導入する。
- 参考スコア(独自算出の注目度): 3.4519796338615225
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Variational Monte Carlo (VMC) is a central algorithm in electronic structure theory and has gained renewed importance through modern neural-network ansätze such as FermiNet. At its core, VMC seeks ground states by minimizing the Rayleigh quotient by stochastic optimization. In this work, we show that the resulting stochastic optimization problem is intrinsically governed by the nodal geometry of the underlying wave function. More precisely, we establish that properties of the nodal set determine the integrability of the local energy and gradient estimators that drive VMC. For broad and practically relevant ansatz classes, including Slater-Jastrow wave functions with variable-exponent Slater-type orbitals, we prove that these estimators are generically heavy-tailed and fail to admit higher moments. At the same time, for general analytic ansätze, we prove weak moment bounds for the relevant estimators and identify precise low-moment regimes, showing how generic and degenerate nodal structures lead to different integrability thresholds. Building on this analysis, we introduce a new robust variant of VMC $\unicode{x2013}$ coined PS-Clip-VMC $\unicode{x2013}$ which is based on clipping both the local energy and the gradient random variable. We prove that PS-Clip-VMC converges both in expectation and with high probability in the weak moment regime of VMC. Preliminary experiments for training FermiNet on Atoms with up to 18 electrons suggest that PS-Clip-VMC is significantly more robust than standard methods.
- Abstract(参考訳): 変分モンテカルロ (VMC) は電子構造理論の中心的なアルゴリズムであり、FermiNetのような現代のニューラルネットワークアンセッツェを通じて、新たな重要性を増している。
中心となるVMCは、確率的最適化によってレイリー商を最小化することで基底状態を求める。
本研究では,結果の確率的最適化問題は,基礎となる波動関数のノルダル幾何によって本質的に制御されていることを示す。
より正確には、ノダル集合の性質が、VMCを駆動する局所エネルギーと勾配推定器の可積分性を決定する。
可変励起スレーター型軌道を持つスレーター・ジャストロウ波動関数を含む広義かつ実践的なアンザッツ類に対して、これらの推定器は一般的な重み付きであり、より高いモーメントを許容できないことを証明した。
同時に、一般的な解析的アンセッツェに対して、関連する推定器の弱いモーメント境界を証明し、正確な低モーメント構造を同定し、汎用的かつ退化的な結節構造がどのように異なる可積分性しきい値をもたらすかを示す。
この分析に基づいて、我々は、局所エネルギーと勾配確率変数の両方をクリップするPS-Clip-VMC $\unicode{x2013}$という新しいロバストなVMCの変種を導入する。
我々はPS-Clip-VMCがVMCの弱いモーメント状態において期待と高い確率で収束することを証明する。
最大18個の電子を持つ原子上でフェルミネットを訓練するための予備実験は、PS-Clip-VMCが標準法よりもかなり堅牢であることを示している。
関連論文リスト
- The Forgotten History of Wave Function Variance Optimization and its Relevance for Neural-Network VMC [0.0]
分散の最小化は暗黙的にガウスの局所エネルギー分布を仮定する。
クーロン系では、局所的なエネルギー分布はE-4$のパワーローテールを示し、中央極限定理は分散推定器に失敗する。
我々はこれらの関数を核間距離毎に正確に解けるシステムである$H+$でベンチマークする。
建設によるエネルギーの最小化は最低エネルギーを得るが、分散の最小化は代替関数によってR$ごとに超える。
論文 参考訳(メタデータ) (2026-09-08T08:53:17Z) - A Defense of the Quadratic Model [71.57026347416729]
最も単純な最適化モデル -- 二次モデル -- をテストする。
1億5000万のパラメータと3Bのトレーニングトークンを持つLLM設定で驚くほど予測可能であることを示す。
論文 参考訳(メタデータ) (2026-07-23T18:02:03Z) - From Atoms to Entropy: Optimal Noise Allocation for Diffusion Training in the Convex Regime [52.459513910242485]
拡散訓練における最適な雑音レベルアロケーションを研究するための一般統計フレームワークを開発する。
最適化されたトレーニングスケジュールは、有限個のノイズレベルに集中した原子最小値を持つことを示す。
次に,大規模実験におけるエントロピック・スケジュールの評価を行った。
論文 参考訳(メタデータ) (2026-07-10T20:59:06Z) - Momentum Stability and Adaptive Control in Stochastic Reconfiguration [6.526210062544706]
変動型モンテカルロ(VMC)と表現型ニューラルネットワークの波動関数の組み合わせは、基底状態計算の強力な経路となっている。
適応再構成(SR)による高精度分散による効率よく安定した波動関数最適化について検討する。
本研究では,実効的なスペクトル次元と部分空間重なりに基づく,チューニング不要な運動量適応型SR法PRIME-SRを提案する。
論文 参考訳(メタデータ) (2026-04-20T14:49:30Z) - Removing nodal and support-mismatch pathologies in Variational Monte Carlo via blurred sampling [5.276073131901768]
変分モンテカルロ(VMC)は、パラメータ化された身体波関数を最適化し、進化させる強力な高速成長法である。
しかし、実際には、メソッドのバックボーンがなければ、ノードの存在によって不安定あるいは偏りになる可能性がある。
これらの問題に対処するために、ぼやけたサンプリングを導入します。
論文 参考訳(メタデータ) (2026-03-18T18:00:05Z) - Improved energies and wave function accuracy with Weighted Variational Monte Carlo [7.72430072816717]
本稿では,変分モンテカルロ(VMC)を波動関数空間の勾配流として解釈し,続いて射影ステップを行う。
この観点からは、任意の確率分布をプロジェクションステップで使用することができ、状態空間の異なる領域の精度を優先することができる。
従来のVMCと比較して、重み付きVMCは基底状態エネルギーの誤差を2倍に減らし、局所エネルギーの誤差を102$-104$で減らした。
論文 参考訳(メタデータ) (2025-06-17T05:51:44Z) - Scaling of Stochastic Normalizing Flows in $\mathrm{SU}(3)$ lattice gauge theory [44.99833362998488]
非平衡マルコフ連鎖モンテカルロシミュレーションは、ターゲット確率分布からのサンプルに対するジャージンスキーの等式に基づくよく理解されたフレームワークを提供する。
平衡外進化はフローベースアプローチの同じ枠組みを共有しており、自然に正規化フロー(SNF)と呼ばれる新しいアーキテクチャに結合することができる。
4次元における$mathrmSU(3)$の格子ゲージ理論に対するSNFの最初の実装は、非平衡モンテカルロ更新の間にゲージ同変層を導入することで定義される。
論文 参考訳(メタデータ) (2024-11-29T19:01:05Z) - Wasserstein Quantum Monte Carlo: A Novel Approach for Solving the
Quantum Many-Body Schr\"odinger Equation [56.9919517199927]
ワーッセルシュタイン量子モンテカルロ (WQMC) はフィッシャー・ラオ計量ではなくワーッセルシュタイン計量によって誘導される勾配流を用いており、テレポートではなく確率質量の輸送に対応する。
我々は、WQMCの力学が分子系の基底状態へのより高速な収束をもたらすことを実証的に実証した。
論文 参考訳(メタデータ) (2023-07-06T17:54:08Z) - Regularization and Variance-Weighted Regression Achieves Minimax
Optimality in Linear MDPs: Theory and Practice [79.48432795639403]
ミラー降下値反復(MDVI)は、KL(Kulback-Leibler)とRL(Entropy-regularized reinforcement learning)の抽象化である。
MDVIを線形関数近似を用いて研究し,$varepsilon$-optimal policyを同定するために必要なサンプル複雑性について検討した。
我々は,無限水平線形MDPに対して,最小限のサンプル複雑性を実現する最初の理論的アルゴリズムである分散重み付き最小二乗法MDVIを提案する。
論文 参考訳(メタデータ) (2023-05-22T16:13:05Z) - Convergence Analysis of Stochastic Gradient Descent with MCMC Estimators [8.493584276672971]
勾配降下(SGD)とその変種は機械学習に不可欠である。
本稿では,マルコフ連鎖モンテカルロ(MCMC)推定器を用いて勾配を計算するSGDアルゴリズムについて考察する。
MCMC-SGDはサドル点から脱出し、$(epsilon,epsilon1/4)$2次定常点に達することが示されている。
論文 参考訳(メタデータ) (2023-03-19T08:29:49Z) - KL-Entropy-Regularized RL with a Generative Model is Minimax Optimal [70.15267479220691]
モデル強化学習のサンプル複雑性を,生成的分散自由モデルを用いて検討・解析する。
我々の分析は、$varepsilon$が十分小さい場合、$varepsilon$-optimal Policyを見つけるのが、ほぼ最小の最適化であることを示している。
論文 参考訳(メタデータ) (2022-05-27T19:39:24Z) - Structured Stochastic Gradient MCMC [20.68905354115655]
近似した後方関数形式を仮定しない新しい非パラメトリック変分近似を提案する。
完全なSGMCMCよりも優れた予測可能性と有効試料サイズが得られる。
論文 参考訳(メタデータ) (2021-07-19T17:18:10Z) - What Are Bayesian Neural Network Posteriors Really Like? [63.950151520585024]
ハミルトニアンモンテカルロは、標準およびディープアンサンブルよりも大きな性能向上を達成できることを示す。
また,深部分布は標準SGLDとHMCに類似しており,標準変動推論に近いことが示された。
論文 参考訳(メタデータ) (2021-04-29T15:38:46Z) - Kernel and Rich Regimes in Overparametrized Models [69.40899443842443]
過度にパラメータ化された多層ネットワーク上の勾配勾配は、RKHSノルムではないリッチな暗黙バイアスを誘発できることを示す。
また、より複雑な行列分解モデルと多層非線形ネットワークに対して、この遷移を実証的に示す。
論文 参考訳(メタデータ) (2020-02-20T15:43:02Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。