論文の概要: On NeuroSymbolic Solutions for PDEs
- arxiv url: http://arxiv.org/abs/2207.06240v1
- Date: Mon, 11 Jul 2022 16:04:20 GMT
- ステータス: 処理完了
- システム内更新日: 2022-07-14 12:50:47.301663
- Title: On NeuroSymbolic Solutions for PDEs
- Title(参考訳): PDEのためのニューロシンボリック溶液について
- Authors: Ritam Majumdar, Vishal Jadhav, Anirudh Deodhar, Shirish Karande,
Lovekesh Vig
- Abstract要約: 物理情報ニューラルネットワーク(PINN)は,PDEを数値的に解く代替手法として広く普及している。
本研究ではPDEの解を近似するためのNeuroSymbolicアプローチについて検討する。
ニューロシンボリック近似は、ニューロシンボリック近似とシンボリック近似に比較して、一貫して1-2次であることを示す。
- 参考スコア(独自算出の注目度): 12.968529838140036
- License: http://creativecommons.org/licenses/by-nc-sa/4.0/
- Abstract: Physics Informed Neural Networks (PINNs) have gained immense popularity as an
alternate method for numerically solving PDEs. Despite their empirical success
we are still building an understanding of the convergence properties of
training on such constraints with gradient descent. It is known that, in the
absence of an explicit inductive bias, Neural Networks can struggle to learn or
approximate even simple and well known functions in a sample efficient manner.
Thus the numerical approximation induced from few collocation points may not
generalize over the entire domain. Meanwhile, a symbolic form can exhibit good
generalization, with interpretability as a useful byproduct. However, symbolic
approximations can struggle to simultaneously be concise and accurate.
Therefore in this work we explore a NeuroSymbolic approach to approximate the
solution for PDEs. We observe that our approach work for several simple cases.
We illustrate the efficacy of our approach on Navier Stokes: Kovasznay flow
where there are multiple physical quantities of interest governed with
non-linear coupled PDE system. Domain splitting is now becoming a popular trick
to help PINNs approximate complex functions. We observe that a NeuroSymbolic
approach can help such complex functions as well. We demonstrate
Domain-splitting assisted NeuroSymbolic approach on a temporally varying
two-dimensional Burger's equation. Finally we consider the scenario where PINNs
have to be solved for parameterized PDEs, for changing Initial-Boundary
Conditions and changes in the coefficient of the PDEs. Hypernetworks have shown
to hold promise to overcome these challenges. We show that one can design
Hyper-NeuroSymbolic Networks which can combine the benefits of speed and
increased accuracy. We observe that that the NeuroSymbolic approximations are
consistently 1-2 order of magnitude better than just the neural or symbolic
approximations.
- Abstract(参考訳): 物理情報ニューラルネットワーク(PINN)はPDEを数値的に解く代替手法として広く普及している。
経験的な成功にもかかわらず、勾配降下を伴うこのような制約下でのトレーニングの収束特性の理解をまだ構築中です。
明示的な帰納バイアスがなければ、ニューラルネットワークはサンプルの効率的な方法でシンプルでよく知られた関数の学習や近似に苦労することが知られている。
したがって、わずかなコロケーション点から誘導される数値近似は、領域全体にわたって一般化できない。
一方、記号形式は優れた一般化を示し、解釈性は有用な副産物である。
しかし、記号近似は簡潔かつ正確であるのに苦労することがある。
そこで本研究では、PDEの解を近似するためのNeuroSymbolicアプローチについて検討する。
我々のアプローチはいくつかの単純なケースで有効である。
非線形結合型PDEシステムによって制御される複数の物理量を持つコヴァズネイ流れについて, ナヴィエストークスに対する我々のアプローチの有効性について述べる。
ドメイン分割は、PINNが複雑な関数を近似するのに役立つ一般的なトリックになりつつある。
我々は神経シンボリックアプローチがこのような複雑な機能にも役立つことを観察する。
時間的に変化する2次元バーガー方程式に対するドメイン分割支援ニューロシンボリックアプローチの実証を行った。
最後に,パラメータ化されたPDEに対してPINNを解決し,初期境界条件を変更し,PDEの係数を変化させるシナリオについて考察する。
Hypernetworksはこれらの課題を克服することを約束している。
速度の利点と精度の向上を両立できるHyper-NeuroSymbolic Networksを設計できることを示す。
ニューロシンボリック近似は、ニューロシンボリック近似やシンボリック近似よりも一貫して1-2等級の等級である。
関連論文リスト
- Learning Traveling Solitary Waves Using Separable Gaussian Neural
Networks [0.9065034043031668]
偏微分方程式(PDE)の様々なファミリをまたいだ走行する孤立波の学習に機械学習アプローチを適用する。
我々のアプローチは、新しい解釈可能なニューラルネットワーク(NN)アーキテクチャを物理情報ニューラルネットワーク(PINN)の枠組みに統合する。
論文 参考訳(メタデータ) (2024-03-07T20:16:18Z) - Correctness Verification of Neural Networks Approximating Differential
Equations [0.0]
ニューラルネットワーク(NN)は部分微分方程式(PDE)の解を近似する
NNはシミュレーションソフトウェアツールの不可欠な部分となり、複雑な動的システムのシミュレーションを100回以上加速することができる。
この研究は、NN微分を有限差分近似として定義することにより、これらの関数の検証に対処する。
初めて、出力領域の事前知識のないNN関数のバウンダリング問題に取り組む。
論文 参考訳(メタデータ) (2024-02-12T12:55:35Z) - Global Convergence of Deep Galerkin and PINNs Methods for Solving
Partial Differential Equations [0.0]
ニューラルネットワークを用いて解を近似することにより、高次元PDEを解くための様々なディープラーニング手法が開発されている。
我々はPDEの解法であるDeep Galerkin MethodDGM(ディープ・ガレルキン・メソッドDGM)の解法として広く使われているディープラーニングアルゴリズムの1つである。
論文 参考訳(メタデータ) (2023-05-10T09:20:11Z) - iPINNs: Incremental learning for Physics-informed neural networks [66.4795381419701]
物理インフォームドニューラルネットワーク(PINN)は、最近偏微分方程式(PDE)を解く強力なツールとなっている。
本稿では,新しいタスクのパラメータを追加せずに連続的に複数のタスクを学習できるインクリメンタルPINNを提案する。
提案手法は,PDEごとに個別のサブネットワークを作成し,従来のサブネットワークと重なり合うようにすることで,最も単純なPDEから複数のPDEを学習する。
論文 参考訳(メタデータ) (2023-04-10T20:19:20Z) - Implicit Stochastic Gradient Descent for Training Physics-informed
Neural Networks [51.92362217307946]
物理インフォームドニューラルネットワーク(PINN)は、前方および逆微分方程式問題の解法として効果的に実証されている。
PINNは、近似すべきターゲット関数が高周波またはマルチスケールの特徴を示す場合、トレーニング障害に閉じ込められる。
本稿では,暗黙的勾配降下法(ISGD)を用いてPINNを訓練し,トレーニングプロセスの安定性を向上させることを提案する。
論文 参考訳(メタデータ) (2023-03-03T08:17:47Z) - Lie Point Symmetry Data Augmentation for Neural PDE Solvers [69.72427135610106]
本稿では,ニューラルPDEソルバサンプルの複雑性を改善することにより,この問題を部分的に緩和する手法を提案する。
PDEの文脈では、データ変換の完全なリストを定量的に導き出せることが分かりました。
神経性PDEソルバサンプルの複雑さを桁違いに改善するために、どのように容易に展開できるかを示す。
論文 参考訳(メタデータ) (2022-02-15T18:43:17Z) - Message Passing Neural PDE Solvers [60.77761603258397]
我々は、バックプロップ最適化されたニューラル関数近似器で、グラフのアリーデザインのコンポーネントを置き換えるニューラルメッセージパッシング解決器を構築した。
本稿では, 有限差分, 有限体積, WENOスキームなどの古典的手法を表現的に含んでいることを示す。
本研究では, 異なる領域のトポロジ, 方程式パラメータ, 離散化などにおける高速, 安定, 高精度な性能を, 1次元, 2次元で検証する。
論文 参考訳(メタデータ) (2022-02-07T17:47:46Z) - Training Feedback Spiking Neural Networks by Implicit Differentiation on
the Equilibrium State [66.2457134675891]
スパイキングニューラルネットワーク(英: Spiking Neural Network、SNN)は、ニューロモルフィックハードウェア上でエネルギー効率の高い実装を可能にする脳にインスパイアされたモデルである。
既存のほとんどの手法は、人工ニューラルネットワークのバックプロパゲーションフレームワークとフィードフォワードアーキテクチャを模倣している。
本稿では,フォワード計算の正逆性に依存しない新しいトレーニング手法を提案する。
論文 参考訳(メタデータ) (2021-09-29T07:46:54Z) - Spline-PINN: Approaching PDEs without Data using Fast, Physics-Informed
Hermite-Spline CNNs [4.560331122656578]
部分微分方程式 (Partial Differential Equations, PDE) は、解くのがとても難しい。
本稿では、最近登場した2つの機械学習ベースのアプローチの利点を組み合わせた新しい手法に基づいて、PDEのソリューションにアプローチすることを提案する。
論文 参考訳(メタデータ) (2021-09-15T08:10:23Z) - dNNsolve: an efficient NN-based PDE solver [62.997667081978825]
ODE/PDEを解決するためにデュアルニューラルネットワークを利用するdNNsolveを紹介します。
我々は,dNNsolveが1,2,3次元の幅広いODE/PDEを解くことができることを示す。
論文 参考訳(メタデータ) (2021-03-15T19:14:41Z) - On the convergence of physics informed neural networks for linear
second-order elliptic and parabolic type PDEs [0.0]
物理情報ニューラルネットワーク(PINN)は、偏微分方程式(PDE)を解くためのディープラーニングに基づく技術である
最小化器の列は$C0$でPDE解に強く収束することを示す。
私たちの知る限りでは、PINNの一貫性を示す最初の理論的研究である。
論文 参考訳(メタデータ) (2020-04-03T22:59:25Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。