論文の概要: A Zeroth-Order Deep Learning Method for Fully Nonlinear Parabolic Partial Differential Equations with Unknown Coefficients
- arxiv url: http://arxiv.org/abs/2606.24999v1
- Date: Tue, 23 Jun 2026 16:04:43 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-06-25 21:36:10.196255
- Title: A Zeroth-Order Deep Learning Method for Fully Nonlinear Parabolic Partial Differential Equations with Unknown Coefficients
- Title(参考訳): 未知係数をもつ完全非線形放物偏微分方程式のゼロ階深層学習法
- Authors: Yanwei Jia, Du Ouyang, Huyên Pham, Xun Yu Zhou,
- Abstract要約: 未知係数を持つ高重み付き部分次元微分方程式(PDE)は機械学習において広く現れる。
既存のディープラーニング解法はしばしば微分演算子を評価するために繰り返し自動微分に依存する。
データ生成機構として2種類のシミュレータを導入し、基礎となるPDE演算子にアクセス可能な設定下でソリューションとそのデリバティブを学習する「表現型学習」アプローチを採用する。
- 参考スコア(独自算出の注目度): 5.693122506667716
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: High-dimensional partial differential equations (PDEs) with unknown coefficients arise widely in scientific machine learning, including continuous-time reinforcement learning, yet solving them efficiently in a data-driven way remains challenging. Existing deep learning solvers often rely on repeated automatic differentiation to evaluate differential operators, which can cause instability and amplify derivative errors in high dimensions, while probabilistic methods based on stochastic representations require explicit knowledge of the data-generating dynamics and therefore do not apply to black-box environments. We introduce two types of simulators as data-generating mechanisms, and take a ``representing-then-learning" approach that learns the solutions and their derivatives under settings where the underlying PDE operators are accessible only through simulations and pointwise evaluations. Our representation of derivatives relies on the zeroth-order derivative (ZOD) estimators derived from perturbed Monte Carlo trajectories. This fully model-free approach generates targets for the gradient and Hessian networks using only function evaluations. We provide a statistical learning analysis of the proposed approach, including a bias--variance tradeoff for ZODs. Assuming a standard contraction property of the underlying operator, we establish a non-asymptotic error bound that decomposes the total error into discretization error, approximation error, statistical error, and ZOD bias. Crucially, we derive the sample complexity of the learned representations in (weighted) Sobolev space, characterizing the error up to second-order derivatives. Numerical experiments illustrate the competitive performance of the method in moderate and high dimensions.
- Abstract(参考訳): 未知係数を持つ高次元偏微分方程式(PDE)は、連続時間強化学習を含む科学機械学習において広く現れるが、データ駆動方式で効率的に解くことは困難である。
既存のディープラーニング解法は、しばしば微分演算子を評価するために繰り返し自動微分に依存し、不安定性を引き起こし、高次元の微分誤差を増幅するが、確率的表現に基づく確率的手法はデータ生成力学の明示的な知識を必要とするため、ブラックボックス環境には適用されない。
データ生成機構として2種類のシミュレータを導入し、基礎となるPDEオペレータがシミュレーションやポイントワイズ評価によってのみアクセス可能な設定下で、ソリューションとそのデリバティブを学習する `representing-then-learning" アプローチを採用する。
微分の表現は、摂動モンテカルロ軌道から導かれるゼロ階微分(ZOD)推定器に依存している。
この完全モデルフリーなアプローチは、関数評価のみを用いて勾配とヘッセンネットワークのターゲットを生成する。
本稿では,ZODに対するバイアス分散トレードオフを含む,提案手法の統計的学習分析を行う。
演算子の標準的な収縮特性を仮定すると、総誤差を離散化誤差、近似誤差、統計誤差、ZODバイアスに分解する非漸近誤差境界を確立する。
重要なことは、(重み付けされた)ソボレフ空間における学習された表現のサンプル複雑性を導出し、二階微分の誤差を特徴づける。
数値実験は、中等度および高次元における手法の競合性能を例証する。
関連論文リスト
- Flow matching Operators for Residual-Augmented Probabilistic Learning of Partial Differential Equations [0.5729426778193397]
無限次元関数空間におけるフローマッチングを定式化し、確率的輸送を学習する。
本研究では,フローマッチングベクトル場に対する特徴量線形変調に基づく条件付きニューラル演算子アーキテクチャを開発する。
提案手法は,解演算子を様々な解像度と忠実度で正確に学習できることを示す。
論文 参考訳(メタデータ) (2025-12-14T16:06:10Z) - Efficient Parametric SVD of Koopman Operator for Stochastic Dynamical Systems [51.54065545849027]
クープマン作用素は非線形力学系を解析するための原理的なフレームワークを提供する。
VAMPnet と DPNet はクープマン作用素の主特異部分空間を学ぶために提案されている。
我々は、クープマン作用素のトップ$kの特異関数を学ぶためのスケーラブルで概念的にシンプルな方法を提案する。
論文 参考訳(メタデータ) (2025-07-09T18:55:48Z) - Dimension reduction for derivative-informed operator learning: An analysis of approximation errors [3.7051887945349518]
ニューラルネットワークによる無限次元分離可能なヒルベルト空間間の非線形作用素の微分インフォームド学習について検討する。
無限次元ガウス入力測度のソボレフノルムにおけるニューラル演算子の近似誤差を解析する。
論文 参考訳(メタデータ) (2025-04-11T17:56:52Z) - Learning Controlled Stochastic Differential Equations [61.82896036131116]
本研究では,非一様拡散を伴う連続多次元非線形微分方程式のドリフト係数と拡散係数の両方を推定する新しい手法を提案する。
我々は、(L2)、(Linfty)の有限サンプル境界や、係数の正則性に適応する学習率を持つリスクメトリクスを含む、強力な理論的保証を提供する。
当社のメソッドはオープンソースPythonライブラリとして利用可能です。
論文 参考訳(メタデータ) (2024-11-04T11:09:58Z) - A Training-Free Conditional Diffusion Model for Learning Stochastic Dynamical Systems [10.820654486318336]
本研究では,未知の微分方程式(SDE)をデータを用いて学習するための学習自由条件拡散モデルを提案する。
提案手法はSDEのモデリングにおける計算効率と精度の重要な課題に対処する。
学習されたモデルは、未知のシステムの短期的および長期的両方の挙動を予測する上で、大幅な改善を示す。
論文 参考訳(メタデータ) (2024-10-04T03:07:36Z) - Total Uncertainty Quantification in Inverse PDE Solutions Obtained with Reduced-Order Deep Learning Surrogate Models [50.90868087591973]
機械学習サロゲートモデルを用いて得られた逆PDE解の総不確かさを近似したベイズ近似法を提案する。
非線型拡散方程式に対する反復的アンサンブルスムーズおよび深層アンサンブル法との比較により,提案手法を検証した。
論文 参考訳(メタデータ) (2024-08-20T19:06:02Z) - Reflected Diffusion Models [93.26107023470979]
本稿では,データのサポートに基づいて進化する反射微分方程式を逆転する反射拡散モデルを提案する。
提案手法は,一般化されたスコアマッチング損失を用いてスコア関数を学習し,標準拡散モデルの主要成分を拡張する。
論文 参考訳(メタデータ) (2023-04-10T17:54:38Z) - Learning Discretized Neural Networks under Ricci Flow [48.47315844022283]
低精度重みとアクティベーションからなる離散ニューラルネットワーク(DNN)について検討する。
DNNは、訓練中に微分不可能な離散関数のために無限あるいはゼロの勾配に悩まされる。
論文 参考訳(メタデータ) (2023-02-07T10:51:53Z) - Rigorous dynamical mean field theory for stochastic gradient descent
methods [17.90683687731009]
一階勾配法の一家系の正確な高次元に対する閉形式方程式を証明した。
これには勾配降下(SGD)やネステロフ加速度などの広く使われているアルゴリズムが含まれる。
論文 参考訳(メタデータ) (2022-10-12T21:10:55Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。