論文の概要: Weak-Form Latent Space Dynamics Identification
- arxiv url: http://arxiv.org/abs/2311.12880v1
- Date: Mon, 20 Nov 2023 18:42:14 GMT
- ステータス: 処理完了
- システム内更新日: 2023-11-23 17:33:38.258449
- Title: Weak-Form Latent Space Dynamics Identification
- Title(参考訳): 弱形式潜在空間ダイナミクスの同定
- Authors: April Tran, Xiaolong He, Daniel A. Messenger, Youngsoo Choi, David M.
Bortz
- Abstract要約: データ駆動モデリングにおける最近の研究は、モデル方程式の弱い定式化が計算手法のノイズロバスト性を高めることを実証している。
最近開発されたデータ駆動還元次数モデリング手法であるLa(Latent Space Dynamics Identification)アルゴリズムを強化するために弱い形状のパワーを実証する。
- 参考スコア(独自算出の注目度): 0.2999888908665658
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: Recent work in data-driven modeling has demonstrated that a weak formulation
of model equations enhances the noise robustness of a wide range of
computational methods. In this paper, we demonstrate the power of the weak form
to enhance the LaSDI (Latent Space Dynamics Identification) algorithm, a
recently developed data-driven reduced order modeling technique.
We introduce a weak form-based version WLaSDI (Weak-form Latent Space
Dynamics Identification). WLaSDI first compresses data, then projects onto the
test functions and learns the local latent space models. Notably, WLaSDI
demonstrates significantly enhanced robustness to noise. With WLaSDI, the local
latent space is obtained using weak-form equation learning techniques. Compared
to the standard sparse identification of nonlinear dynamics (SINDy) used in
LaSDI, the variance reduction of the weak form guarantees a robust and precise
latent space recovery, hence allowing for a fast, robust, and accurate
simulation. We demonstrate the efficacy of WLaSDI vs. LaSDI on several common
benchmark examples including viscid and inviscid Burgers', radial advection,
and heat conduction. For instance, in the case of 1D inviscid Burgers'
simulations with the addition of up to 100% Gaussian white noise, the relative
error remains consistently below 6% for WLaSDI, while it can exceed 10,000% for
LaSDI. Similarly, for radial advection simulations, the relative errors stay
below 15% for WLaSDI, in stark contrast to the potential errors of up to
10,000% with LaSDI. Moreover, speedups of several orders of magnitude can be
obtained with WLaSDI. For example applying WLaSDI to 1D Burgers' yields a 140X
speedup compared to the corresponding full order model.
Python code to reproduce the results in this work is available at
(https://github.com/MathBioCU/PyWSINDy_ODE) and
(https://github.com/MathBioCU/PyWLaSDI).
- Abstract(参考訳): データ駆動モデリングにおける最近の研究は、モデル方程式の弱い定式化が幅広い計算手法のノイズロバスト性を高めることを示した。
本稿では,最近開発されたデータ駆動型減数次モデリング手法であるlasdi(latent space dynamics identification)アルゴリズムを,弱形式で拡張する能力を示す。
弱形式に基づくwlasdi (weak-form latent space dynamics identification) を導入する。
WLaSDIはまずデータを圧縮し、次にテスト関数に投影し、局所潜在空間モデルを学ぶ。
特に、WLaSDIはノイズに対するロバスト性を大幅に強化している。
WLaSDIでは、弱形式方程式学習技術を用いて局所潜在空間を求める。
LaSDIで使用される非線形力学(SINDy)の標準的なスパース同定と比較すると、弱い形状の分散は頑健で正確な遅延空間回復を保証し、高速で堅牢で正確なシミュレーションを可能にする。
WLaSDI 対 LaSDI の有効性は,バーガーズ,ラジアル対流,熱伝導など,いくつかの一般的なベンチマーク例で示されている。
例えば、1D inviscid Burgersのシミュレーションでは、最大100%ガウスホワイトノイズが加わり、相対誤差はWLaSDIでは6%以下であり、LaSDIでは10,000%を超える。
同様に、放射対流シミュレーションでは、相対誤差はWLaSDIの15%以下であり、LaSDIの1万%の潜在的な誤差とは対照的である。
さらに、WLaSDIで数桁のスピードアップが得られる。
例えば、WLaSDIを1D Burgers'に適用すると、対応するフルオーダーモデルと比較して140倍のスピードアップが得られる。
この作業の結果を再現するためのPythonコードは (https://github.com/MathBioCU/PyWSINDy_ODE) と (https://github.com/MathBioCU/PyWLaSDI) にある。
関連論文リスト
- Dynamic Diffusion Transformer [67.13876021157887]
Diffusion Transformer (DiT) は優れた性能を示したが、かなりの計算コストに悩まされている。
本研究では,動的拡散変換器 (DyDiT) を提案する。
3%の微調整により,DiT-XLのFLOPを51%削減し,生成を1.73高速化し,ImageNet上でのFIDスコア2.07を達成する。
論文 参考訳(メタデータ) (2024-10-04T14:14:28Z) - DyFADet: Dynamic Feature Aggregation for Temporal Action Detection [70.37707797523723]
カーネル重みと受容フィールドを異なるタイムスタンプで適応できる新しい動的特徴集約(DFA)モジュールを構築した。
DFAを使用することで動的DADヘッド(DyHead)の開発を支援し、パラメータを調整したマルチスケール機能を適応的に集約する。
新しい動的TADモデルであるDyFADetは、一連の挑戦的なTADベンチマークで有望なパフォーマンスを達成する。
論文 参考訳(メタデータ) (2024-07-03T15:29:10Z) - Physics-informed active learning with simultaneous weak-form latent space dynamics identification [0.2999888908665658]
非線形力学(WENDy)の弱形式推定をgLaに導入する。
オートエンコーダとWENDyは同時に訓練され、高次元データの潜時空間のダイナミクスを発見する。
WgLa は gLa よりも桁違いに優れ,相対誤差は 1-7% である。
論文 参考訳(メタデータ) (2024-06-29T06:52:59Z) - A Comprehensive Review of Latent Space Dynamics Identification Algorithms for Intrusive and Non-Intrusive Reduced-Order-Modeling [0.20742830443146304]
我々は、PDEによって支配される高忠実度データを、通常の微分方程式(ODE)によって支配される単純で低次元のデータに変換する、Lalatent Space Dynamics Identification (La)と呼ばれるフレームワークに焦点を当てる。
Laのビルディングブロックはアプリケーションによって簡単に変更できるため、Laフレームワークの柔軟性は高い。
本研究では, バーガース方程式, 非線形熱伝導問題, プラズマ物理問題に対するLaアプローチの性能を実証し, ラアルゴリズムが相対誤差を数パーセント以下で, 数千倍の高速化を達成可能であることを示した。
論文 参考訳(メタデータ) (2024-03-16T00:45:06Z) - Can LLMs Separate Instructions From Data? And What Do We Even Mean By That? [60.50127555651554]
大規模言語モデル(LLM)は、多くの実用的なアプリケーションにおいて印象的な結果を示すが、基本的な安全性機能は欠如している。
これにより、間接的なプロンプトインジェクションのような操作に脆弱になり、一般に安全クリティカルなタスクには適さない。
モデル出力から計算可能な命令データ分離の形式的尺度と経験的変量を導入する。
論文 参考訳(メタデータ) (2024-03-11T15:48:56Z) - Data-Driven Autoencoder Numerical Solver with Uncertainty Quantification
for Fast Physical Simulations [0.0]
本稿では,ハイブリッドディープラーニングとベイズROM.aについて紹介する。
我々は、全順序モデル(FOM)データに基づいてオートエンコーダを訓練し、同時に潜在空間を規定するより単純な方程式を学習する。
我々のフレームワークは流体力学の問題に対して最大10万倍のスピードアップと7%未満の相対誤差を達成できる。
論文 参考訳(メタデータ) (2023-12-02T04:03:32Z) - DistillSpec: Improving Speculative Decoding via Knowledge Distillation [70.61777015900272]
投機的復号(SD)は、複数のトークンを生成するためにより高速なドラフトモデルを使用することで、大きな言語モデル推論を加速する。
本稿では,SDを適用する前に,知識蒸留を用いて,ドラフトモデルとターゲットモデルとの整合性を向上するDistillSpecを提案する。
DistillSpecは標準SDよりも10~45%のスピードアップを実現しています。
論文 参考訳(メタデータ) (2023-10-12T16:21:04Z) - GPLaSDI: Gaussian Process-based Interpretable Latent Space Dynamics Identification through Deep Autoencoder [0.0]
潜在空間ODEに依存する新しいLa Gaussianベースのフレームワークを導入する。
本稿では,バーガース方程式,プラズマ物理学におけるフラソフ方程式,上昇する熱バブル問題に対する我々のアプローチの有効性を実証する。
提案手法は,200~10万倍の高速化を実現し,相対誤差を最大7%向上する。
論文 参考訳(メタデータ) (2023-08-10T23:54:12Z) - Combating Mode Collapse in GANs via Manifold Entropy Estimation [70.06639443446545]
Generative Adversarial Networks (GAN) は、様々なタスクやアプリケーションにおいて魅力的な結果を示している。
GANのモード崩壊問題に対処するための新しいトレーニングパイプラインを提案する。
論文 参考訳(メタデータ) (2022-08-25T12:33:31Z) - gLaSDI: Parametric Physics-informed Greedy Latent Space Dynamics
Identification [0.5249805590164902]
物理インフォームド・グレディ・ラテント・スペース・ダイナミクス同定法(gLa)を提案する。
インタラクティブなトレーニングアルゴリズムがオートエンコーダとローカルDIモデルに採用され、単純な潜在空間のダイナミクスを識別できる。
提案手法の有効性は, 様々な非線形力学問題をモデル化することによって実証される。
論文 参考訳(メタデータ) (2022-04-26T00:15:46Z) - Your GAN is Secretly an Energy-based Model and You Should use
Discriminator Driven Latent Sampling [106.68533003806276]
本研究では,潜時空間におけるサンプリングは,潜時空間の前対数密度と判別器出力スコアの和によって誘導されるエネルギーベースモデルに従って,潜時空間におけるサンプリングを行うことによって達成できることを示す。
判別器駆動潜時サンプリング(DDLS)は,高次元画素空間で動作する従来の手法と比較して,高効率であることを示す。
論文 参考訳(メタデータ) (2020-03-12T23:33:50Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。