論文の概要: Stochastic Gradient MCMC for Nonlinear State Space Models
- arxiv url: http://arxiv.org/abs/1901.10568v3
- Date: Sun, 16 Jul 2023 16:04:24 GMT
- ステータス: 処理完了
- システム内更新日: 2023-07-30 04:31:28.057373
- Title: Stochastic Gradient MCMC for Nonlinear State Space Models
- Title(参考訳): 非線形状態空間モデルのための確率勾配MCMC
- Authors: Christopher Aicher, Srshti Putcha, Christopher Nemeth, Paul Fearnhead,
and Emily B. Fox
- Abstract要約: 非線形で非ガウス的なSSMの推論は、長い時間系列にうまくスケールしない粒子法にしばしば取り組まれる。
MCMC法は有限状態隠れマルコフモデルと線形SSMの推論をスケールするために開発された。
本稿では,バッファリングエラーとパーティクルエラーの両方を考慮に入れたエラー境界について述べる。
- 参考スコア(独自算出の注目度): 4.583433328833251
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: State space models (SSMs) provide a flexible framework for modeling complex
time series via a latent stochastic process. Inference for nonlinear,
non-Gaussian SSMs is often tackled with particle methods that do not scale well
to long time series. The challenge is two-fold: not only do computations scale
linearly with time, as in the linear case, but particle filters additionally
suffer from increasing particle degeneracy with longer series. Stochastic
gradient MCMC methods have been developed to scale Bayesian inference for
finite-state hidden Markov models and linear SSMs using buffered stochastic
gradient estimates to account for temporal dependencies. We extend these
stochastic gradient estimators to nonlinear SSMs using particle methods. We
present error bounds that account for both buffering error and particle error
in the case of nonlinear SSMs that are log-concave in the latent process. We
evaluate our proposed particle buffered stochastic gradient using stochastic
gradient MCMC for inference on both long sequential synthetic and
minute-resolution financial returns data, demonstrating the importance of this
class of methods.
- Abstract(参考訳): 状態空間モデル(SSM)は、潜在確率過程を通じて複雑な時系列をモデル化するための柔軟なフレームワークを提供する。
非線形で非ガウス的なSSMの推論は、長い時間系列にうまくスケールしない粒子法にしばしば取り組まれる。
問題は2つある: 線形の場合のように計算を時間とともに線形にスケールするだけでなく、粒子フィルタは長い系列で粒子の縮退を増大させる。
確率勾配MCMC法は有限状態隠れマルコフモデルと線形SSMのベイズ推定を時相依存性を考慮したバッファ付き確率勾配推定を用いて拡張する。
確率勾配推定器を粒子法を用いて非線形ssmに拡張する。
本研究では,非線形ssmにおけるバッファリング誤差と粒子誤差の両方を考慮した誤差境界を提案する。
提案した粒子バッファリング確率勾配を確率勾配MCMCを用いて,長周期合成および微細分解の両方の財務リターンデータから推定し,この手法の重要性を実証した。
関連論文リスト
- On the Trajectory Regularity of ODE-based Diffusion Sampling [79.17334230868693]
拡散に基づく生成モデルは微分方程式を用いて、複素データ分布と抽出可能な事前分布の間の滑らかな接続を確立する。
本稿では,拡散モデルのODEに基づくサンプリングプロセスにおいて,いくつかの興味深い軌道特性を同定する。
論文 参考訳(メタデータ) (2024-05-18T15:59:41Z) - Machine-Learned Closure of URANS for Stably Stratified Turbulence: Connecting Physical Timescales & Data Hyperparameters of Deep Time-Series Models [0.0]
我々は、非定常レイノルズ平均ナビエストークス方程式のクロージャモデリングのための時系列機械学習(ML)法を開発した。
我々は, 均一密度勾配により均一で安定に成層された崩壊SSTを考察した。
MLモデルがSSTの力学を正確に捉えるために必要な最小情報の時間尺度の比率は,流れのレイノルズ数と一致することがわかった。
論文 参考訳(メタデータ) (2024-04-24T18:58:00Z) - Differentiable and Stable Long-Range Tracking of Multiple Posterior Modes [1.534667887016089]
我々は、学習データを活用し、潜在対象状態における不確実性の粒子ベース表現を識別的に学習する。
提案手法は精度を劇的に向上すると同時に,複数のトレーニング実行における安定性も向上する。
論文 参考訳(メタデータ) (2024-04-12T19:33:52Z) - Online Variational Sequential Monte Carlo [49.97673761305336]
我々は,計算効率が高く正確なモデルパラメータ推定とベイジアン潜在状態推定を提供する変分連続モンテカルロ法(VSMC)を構築した。
オンラインVSMCは、パラメータ推定と粒子提案適応の両方を効率よく、完全にオンザフライで実行することができる。
論文 参考訳(メタデータ) (2023-12-19T21:45:38Z) - Efficient Exploration in Continuous-time Model-based Reinforcement
Learning [37.14026153342745]
強化学習アルゴリズムは典型的には離散時間力学を考察するが、基礎となるシステムは時間的に連続していることが多い。
連続時間力学を表すモデルに基づく強化学習アルゴリズムを提案する。
論文 参考訳(メタデータ) (2023-10-30T15:04:40Z) - Monte Carlo Neural PDE Solver for Learning PDEs via Probabilistic Representation [59.45669299295436]
教師なしニューラルソルバのトレーニングのためのモンテカルロPDEソルバを提案する。
我々は、マクロ現象をランダム粒子のアンサンブルとみなすPDEの確率的表現を用いる。
対流拡散, アレン・カーン, ナヴィエ・ストークス方程式に関する実験により, 精度と効率が著しく向上した。
論文 参考訳(メタデータ) (2023-02-10T08:05:19Z) - Score-based Continuous-time Discrete Diffusion Models [102.65769839899315]
連続時間マルコフ連鎖を介して逆過程が認知されるマルコフジャンププロセスを導入することにより、拡散モデルを離散変数に拡張する。
条件境界分布の単純なマッチングにより、偏りのない推定器が得られることを示す。
提案手法の有効性を,合成および実世界の音楽と画像のベンチマークで示す。
論文 参考訳(メタデータ) (2022-11-30T05:33:29Z) - Efficient Learning of the Parameters of Non-Linear Models using
Differentiable Resampling in Particle Filters [1.9499120576896227]
粒子フィルタにおけるサンプリングと再サンプリングのステップを区別することが広く文書化されている。
2つの状態空間モデルを検討し、NUTSがマルコフ連鎖の混合を改善し、計算時間の短縮でより正確な結果が得られることを示す。
論文 参考訳(メタデータ) (2021-11-02T08:03:09Z) - The Connection between Discrete- and Continuous-Time Descriptions of
Gaussian Continuous Processes [60.35125735474386]
我々は、一貫した推定子をもたらす離散化が粗粒化下での不変性を持つことを示す。
この結果は、導関数再構成のための微分スキームと局所時間推論アプローチの組み合わせが、2次または高次微分方程式の時系列解析に役立たない理由を説明する。
論文 参考訳(メタデータ) (2021-01-16T17:11:02Z) - Convergence and sample complexity of gradient methods for the model-free
linear quadratic regulator problem [27.09339991866556]
本稿では,コントローラの空間を直接探索することにより,未知の計算系に対する最適制御を求める。
我々は、安定化フィードバックゲインの勾配-フローのダイナミクスセットに焦点をあてて、そのような手法の性能と効率を最小化するための一歩を踏み出した。
論文 参考訳(メタデータ) (2019-12-26T16:56:59Z) - Targeted stochastic gradient Markov chain Monte Carlo for hidden Markov models with rare latent states [48.705095800341944]
隠れマルコフモデルのためのマルコフ連鎖モンテカルロ (MCMC) アルゴリズムは、しばしば前向きのサンプリング器に依存する。
これにより、時系列の長さが増加するにつれて計算が遅くなり、サブサンプリングベースのアプローチの開発が動機となる。
本稿では,パラメータの勾配を計算する際に,希少な潜伏状態に対応するオーバーサンプリング観測を対象とするサブサンプリング手法を提案する。
論文 参考訳(メタデータ) (2018-10-31T17:44:20Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。