論文の概要: Late Fusion Neural Operators for Extrapolation Across Parameter Space in Partial Differential Equations
- arxiv url: http://arxiv.org/abs/2604.16721v1
- Date: Fri, 17 Apr 2026 21:52:37 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-04-21 21:52:52.144385
- Title: Late Fusion Neural Operators for Extrapolation Across Parameter Space in Partial Differential Equations
- Title(参考訳): 部分微分方程式におけるパラメータ空間外挿に対する後期核融合型ニューラル演算子
- Authors: Eva van Tegelen, Taniya Kapoor, George A. K. van Voorn, Peter van Heijster, Ioannis N. Athanasiadis,
- Abstract要約: 本稿では,パラメータ効果から学習状態のダイナミクスを分離するアーキテクチャであるレイトフュージョンニューラル演算子を紹介する。
提案手法は,潜在状態表現を学習するためのニューラル演算子とスパース回帰を組み合わせ,パラメータ情報を構造化された方法で組み込む。
- 参考スコア(独自算出の注目度): 3.4369924555307794
- License: http://creativecommons.org/licenses/by-nc-sa/4.0/
- Abstract: Developing neural operators that accurately predict the behavior of systems governed by partial differential equations (PDEs) across unseen parameter regimes is crucial for robust generalization in scientific and engineering applications. In practical applications, variations in physical parameters induce distribution shifts between training and prediction regimes, making extrapolation a central challenge. As a result, the way parameters are incorporated into neural operator models plays a key role in their ability to generalize, particularly when state and parameter representations are entangled. In this work, we introduce the Late Fusion Neural Operator, an architecture that disentangles learning state dynamics from parameter effects, improving predictive performance both within and beyond the training distribution. Our approach combines neural operators for learning latent state representations with sparse regression to incorporate parameter information in a structured manner. Across four benchmark PDEs including advection, Burgers, and both 1D and 2D reaction-diffusion equations, the proposed method consistently outperforms Fourier Neural Operator and CAPE-FNO. Late Fusion Neural Operators achieve consistently the best performance in all experiments, with an average RMSE reduction of 72.9% in-domain and 71.8% out-domain compared to the second-best method. These results demonstrate strong generalization across both in-domain and out-domain parameter regimes.
- Abstract(参考訳): 偏微分方程式(PDE)によって制御されるシステムの挙動を、未知のパラメータレジームにわたって正確に予測する神経演算子の開発は、科学や工学の応用において堅牢な一般化に不可欠である。
現実的な応用において、物理パラメータの変動は、トレーニングと予測規則の間の分布シフトを誘導し、外挿が中心的な課題となる。
結果として、パラメータをニューラル演算子モデルに組み込む方法は、特に状態とパラメータ表現が絡み合っている場合、その一般化能力において重要な役割を果たす。
本研究では、パラメータ効果から学習状態のダイナミクスを解き放つアーキテクチャであるレイトフュージョンニューラル演算子を導入し、トレーニング分布内外の予測性能を改善する。
提案手法は,潜在状態表現を学習するためのニューラル演算子とスパース回帰を組み合わせ,パラメータ情報を構造化された方法で組み込む。
対流,バーガー,および1次元および2次元の反応拡散方程式を含む4つのベンチマークPDEにおいて,提案手法はフーリエニューラル演算子とCAPE-FNOを一貫して上回っている。
レイトフュージョン・ニューラル・オペレーターは全ての実験で一貫して最高の性能を達成し、平均的なRMSEは72.9%の内ドメイン、71.8%の外ドメインを減らした。
これらの結果は、ドメイン内パラメータと外部パラメータの両方に強い一般化を示す。
関連論文リスト
- Expanding the Chaos: Neural Operator for Stochastic (Partial) Differential Equations [65.80144621950981]
我々はWienerカオス拡張(WCE)に基づいて、SPDEとSDEのためのニューラル演算子(NO)アーキテクチャを設計する。
WCEベースのニューラル演算子は、SDE/SPDEソリューション演算子を学習するための実用的でスケーラブルな方法を提供する。
論文 参考訳(メタデータ) (2026-01-03T00:59:25Z) - Efficient Transformed Gaussian Process State-Space Models for Non-Stationary High-Dimensional Dynamical Systems [49.819436680336786]
本研究では,高次元非定常力学系のスケーラブルかつ柔軟なモデリングのための効率的な変換ガウス過程状態空間モデル(ETGPSSM)を提案する。
具体的には、ETGPSSMは、単一の共有GPと入力依存の正規化フローを統合し、複雑な非定常遷移ダイナミクスを捉える前に、表現的な暗黙のプロセスを生成する。
ETGPSSMは、計算効率と精度の観点から、既存のGPSSMとニューラルネットワークベースのSSMより優れています。
論文 参考訳(メタデータ) (2025-03-24T03:19:45Z) - Neural Parameter Regression for Explicit Representations of PDE Solution Operators [22.355460388065964]
偏微分方程式(PDE)の解演算子を学習するための新しいフレームワークであるニューラル回帰(NPR)を導入する。
NPRは、ニューラルネットワーク(NN)パラメータを回帰するために、Physics-Informed Neural Network (PINN, Raissi et al., 2021) 技術を使用している。
このフレームワークは、新しい初期条件と境界条件に顕著な適応性を示し、高速な微調整と推論を可能にした。
論文 参考訳(メタデータ) (2024-03-19T14:30:56Z) - PICL: Physics Informed Contrastive Learning for Partial Differential Equations [7.136205674624813]
我々は,複数の支配方程式にまたがるニューラル演算子一般化を同時に改善する,新しいコントラスト事前学習フレームワークを開発する。
物理インフォームドシステムの進化と潜在空間モデル出力の組み合わせは、入力データに固定され、我々の距離関数で使用される。
物理インフォームドコントラストプレトレーニングにより,1次元および2次元熱,バーガーズ,線形対流方程式に対する固定フューチャーおよび自己回帰ロールアウトタスクにおけるフーリエニューラル演算子の精度が向上することがわかった。
論文 参考訳(メタデータ) (2024-01-29T17:32:22Z) - Implicit Stochastic Gradient Descent for Training Physics-informed
Neural Networks [51.92362217307946]
物理インフォームドニューラルネットワーク(PINN)は、前方および逆微分方程式問題の解法として効果的に実証されている。
PINNは、近似すべきターゲット関数が高周波またはマルチスケールの特徴を示す場合、トレーニング障害に閉じ込められる。
本稿では,暗黙的勾配降下法(ISGD)を用いてPINNを訓練し,トレーニングプロセスの安定性を向上させることを提案する。
論文 参考訳(メタデータ) (2023-03-03T08:17:47Z) - Incorporating NODE with Pre-trained Neural Differential Operator for
Learning Dynamics [73.77459272878025]
ニューラル微分演算子(NDO)の事前学習による動的学習における教師付き信号の強化を提案する。
NDOは記号関数のクラスで事前訓練され、これらの関数の軌跡サンプルとそれらの導関数とのマッピングを学習する。
我々は,NDOの出力が,ライブラリの複雑さを適切に調整することで,基礎となる真理微分を適切に近似できることを理論的に保証する。
論文 参考訳(メタデータ) (2021-06-08T08:04:47Z) - Provably Efficient Neural Estimation of Structural Equation Model: An
Adversarial Approach [144.21892195917758]
一般化構造方程式モデル(SEM)のクラスにおける推定について検討する。
線形作用素方程式をmin-maxゲームとして定式化し、ニューラルネットワーク(NN)でパラメータ化し、勾配勾配を用いてニューラルネットワークのパラメータを学習する。
提案手法は,サンプル分割を必要とせず,確固とした収束性を持つNNをベースとしたSEMの抽出可能な推定手順を初めて提供する。
論文 参考訳(メタデータ) (2020-07-02T17:55:47Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。