論文の概要: Hierarchical Stochastic Differential Equation Models for Latent Manifold Learning in Neural Time Series
- arxiv url: http://arxiv.org/abs/2507.21531v1
- Date: Tue, 29 Jul 2025 06:51:58 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-07-30 17:08:55.763399
- Title: Hierarchical Stochastic Differential Equation Models for Latent Manifold Learning in Neural Time Series
- Title(参考訳): 階層的確率微分方程式モデルによるニューラル時系列における潜在的マニフォールド学習
- Authors: Pedram Rajaei, Maryam Ostadsharif Memar, Navid Ziaei, Behzad Nazari, Ali Yousefi,
- Abstract要約: 本稿では計算効率と解釈可能性のバランスをとる新しい階層微分方程式(SDE)モデルを提案する。
我々は、トレーニングと推論の手順を導出し、推論の計算コストが観測データの長さと線形にスケールすることを示す。
- 参考スコア(独自算出の注目度): 0.0
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: The manifold hypothesis suggests that high-dimensional neural time series lie on a low-dimensional manifold shaped by simpler underlying dynamics. To uncover this structure, latent dynamical variable models such as state-space models, recurrent neural networks, neural ordinary differential equations, and Gaussian Process Latent Variable Models are widely used. We propose a novel hierarchical stochastic differential equation (SDE) model that balances computational efficiency and interpretability, addressing key limitations of existing methods. Our model assumes the trajectory of a manifold can be reconstructed from a sparse set of samples from the manifold trajectory. The latent space is modeled using Brownian bridge SDEs, with points - specified in both time and value - sampled from a multivariate marked point process. These Brownian bridges define the drift of a second set of SDEs, which are then mapped to the observed data. This yields a continuous, differentiable latent process capable of modeling arbitrarily complex time series as the number of manifold points increases. We derive training and inference procedures and show that the computational cost of inference scales linearly with the length of the observation data. We then validate our model on both synthetic data and neural recordings to demonstrate that it accurately recovers the underlying manifold structure and scales effectively with data dimensionality.
- Abstract(参考訳): 多様体仮説は、より単純な基礎力学によって形作られた低次元多様体の上に高次元のニューラル時系列が存在することを示唆している。
この構造を明らかにするために、状態空間モデル、リカレントニューラルネットワーク、ニューラル常微分方程式、ガウス過程潜在変数モデルなどの潜在動的変数モデルが広く用いられている。
本稿では、計算効率と解釈可能性のバランスを保ち、既存の手法の重要な制約に対処する新しい階層確率微分方程式(SDE)モデルを提案する。
我々のモデルは、多様体の軌跡のスパース集合から多様体の軌跡を再構成できると仮定する。
潜在空間はブラウン橋SDEを用いてモデル化され、時間と値の両方で指定された点が多変量マークされた点プロセスからサンプリングされる。
これらのブラウン橋は2つ目のSDEの漂流を定義し、観測されたデータにマッピングされる。
これにより、多様体点の数が増加するにつれて、任意の複雑な時系列をモデル化できる連続的で微分可能な潜在過程が得られる。
我々は、トレーニングと推論の手順を導出し、推論の計算コストが観測データの長さと線形にスケールすることを示す。
次に、合成データとニューラル記録の両方でモデルを検証し、基礎となる多様体構造を正確に復元し、データ次元で効果的にスケールすることを示した。
関連論文リスト
- Generative Learning for Slow Manifolds and Bifurcation Diagrams [0.35587965024910395]
条件付きスコアベース生成モデル(cSGM)は、あるラベルに条件付けされた対象分布から可塑性データを生成する能力を実証している。
本稿では,cSGMを用いて低次元(高次)スロー多様体を高速に初期化するためのフレームワークを提案する。
この条件付きサンプリングは、還元されたスローマンフォールドの幾何を明らかにするのに役立ち、あるいは分岐図において、''' の欠落した定常状態のセグメントをほぼ満たすのに役立つ。
論文 参考訳(メタデータ) (2025-04-29T02:38:44Z) - Latent Space Energy-based Neural ODEs [73.01344439786524]
本稿では,連続時間列を表現するために設計された新しい深部力学モデルを提案する。
マルコフ連鎖モンテカルロの最大推定値を用いてモデルを訓練する。
振動系, ビデオ, 実世界の状態系列(MuJoCo)の実験結果から, 学習可能なエネルギーベース先行モデルの方が既存のモデルより優れていることが示された。
論文 参考訳(メタデータ) (2024-09-05T18:14:22Z) - On the Trajectory Regularity of ODE-based Diffusion Sampling [79.17334230868693]
拡散に基づく生成モデルは微分方程式を用いて、複素データ分布と抽出可能な事前分布の間の滑らかな接続を確立する。
本稿では,拡散モデルのODEに基づくサンプリングプロセスにおいて,いくつかの興味深い軌道特性を同定する。
論文 参考訳(メタデータ) (2024-05-18T15:59:41Z) - Learning Space-Time Continuous Neural PDEs from Partially Observed
States [13.01244901400942]
格子独立モデル学習偏微分方程式(PDE)を雑音および不規則格子上の部分的な観測から導入する。
本稿では、効率的な確率的フレームワークとデータ効率とグリッド独立性を改善するための新しい設計エンコーダを備えた時空間連続型ニューラルネットワークPDEモデルを提案する。
論文 参考訳(メタデータ) (2023-07-09T06:53:59Z) - A Geometric Perspective on Diffusion Models [57.27857591493788]
本稿では,人気のある分散拡散型SDEのODEに基づくサンプリングについて検討する。
我々は、最適なODEベースのサンプリングと古典的な平均シフト(モード探索)アルゴリズムの理論的関係を確立する。
論文 参考訳(メタデータ) (2023-05-31T15:33:16Z) - Data-Driven Reduced-Order Modeling of Spatiotemporal Chaos with Neural
Ordinary Differential Equations [0.0]
本稿では,偏微分方程式のカオス力学を生かしたデータ駆動型還元次数モデリング手法を提案する。
次元の減少は周囲空間の予測と比較して性能を向上することがわかった。
低次元モデルでは、広い空間データに対する真の力学の短・長期統計レクリエーションに優れる。
論文 参考訳(メタデータ) (2021-08-31T20:00:33Z) - Closed-form Continuous-Depth Models [99.40335716948101]
連続深度ニューラルモデルは高度な数値微分方程式解法に依存している。
我々は,CfCネットワークと呼ばれる,記述が簡単で,少なくとも1桁高速な新しいモデル群を提示する。
論文 参考訳(メタデータ) (2021-06-25T22:08:51Z) - Identifying Latent Stochastic Differential Equations [29.103393300261587]
本研究では,高次元時系列データから潜時微分方程式(SDE)を学習する手法を提案する。
提案手法は,自己教師付き学習手法を用いて,環境空間から潜時空間へのマッピングと,基礎となるSDE係数を学習する。
提案手法の検証には,SDEの基盤となる複数のビデオ処理タスク,および実世界のデータセットを用いて行う。
論文 参考訳(メタデータ) (2020-07-12T19:46:31Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。