論文の概要: Physics-Guided, Physics-Informed, and Physics-Encoded Neural Networks in
Scientific Computing
- arxiv url: http://arxiv.org/abs/2211.07377v1
- Date: Mon, 14 Nov 2022 15:44:07 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-15 19:18:08.306900
- Title: Physics-Guided, Physics-Informed, and Physics-Encoded Neural Networks in
Scientific Computing
- Title(参考訳): 科学計算における物理誘導・物理インフォームド・物理符号化ニューラルネットワーク
- Authors: Salah A Faroughi, Nikhil Pawar, Celio Fernandes, Subasish Das, Nima K.
Kalantari, Seyed Kourosh Mahjour
- Abstract要約: コンピュータパワーの最近の進歩は、機械学習とディープラーニングを使って科学計算を進歩させることを可能にした。
固有のアーキテクチャのため、従来のニューラルネットワークは、データがスパースである場合には、うまくトレーニングされ、スコープ化できない。
ニューラルネットワークは、物理的駆動あるいは知識に基づく制約を消化するための強力な基盤を提供する。
- 参考スコア(独自算出の注目度): 0.0
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Recent breakthroughs in computing power have made it feasible to use machine
learning and deep learning to advance scientific computing in many fields, such
as fluid mechanics, solid mechanics, materials science, etc. Neural networks,
in particular, play a central role in this hybridization. Due to their
intrinsic architecture, conventional neural networks cannot be successfully
trained and scoped when data is sparse; a scenario that is true in many
scientific fields. Nonetheless, neural networks offer a strong foundation to
digest physical-driven or knowledge-based constraints during training.
Generally speaking, there are three distinct neural network frameworks to
enforce underlying physics: (i) physics-guided neural networks (PgNN), (ii)
physics-informed neural networks (PiNN) and (iii) physics-encoded neural
networks (PeNN). These approaches offer unique advantages to accelerate the
modeling of complex multiscale multi-physics phenomena. They also come with
unique drawbacks and suffer from unresolved limitations (e.g., stability,
convergence, and generalization) that call for further research. This study
aims to present an in-depth review of the three neural network frameworks
(i.e., PgNN, PiNN, and PeNN) used in scientific computing research. The
state-of-the-art architectures and their applications are reviewed; limitations
are discussed; and future research opportunities in terms of improving
algorithms, considering causalities, expanding applications, and coupling
scientific and deep learning solvers are presented. This critical review
provides a solid starting point for researchers and engineers to comprehend how
to integrate different layers of physics into neural networks.
- Abstract(参考訳): 近年のコンピュータパワーのブレークスルーにより、流体力学、固体力学、材料科学など、多くの分野において、機械学習とディープラーニングを使って科学計算を進歩させることが可能になった。
特にニューラルネットワークは、このハイブリダイゼーションにおいて中心的な役割を果たす。
内在的なアーキテクチャのため、従来のニューラルネットワークは、データがスパースである場合、うまくトレーニングされ、スコープ化できない。
それでもニューラルネットワークは、トレーニング中に物理的あるいは知識に基づく制約を消化する強力な基盤を提供する。
一般的に、基礎となる物理を強制する3つの異なるニューラルネットワークフレームワークがあります。
(i)物理誘導ニューラルネットワーク(PgNN)
(ii)物理情報化ニューラルネットワーク(pinn)及び
(iii)物理符号化ニューラルネットワーク(PeNN)
これらのアプローチは、複雑な多スケール多物理現象のモデリングを加速するユニークな利点を提供する。
それらはまた、ユニークな欠点を持ち、さらなる研究を必要とする未解決の制限(安定性、収束、一般化など)に苦しむ。
本研究の目的は、科学計算研究で使用される3つのニューラルネットワークフレームワーク(PgNN、PiNN、PeNN)の詳細なレビューを行うことである。
現状のアーキテクチャとその応用を概観し、限界について論じ、因果関係の考慮、応用の拡大、科学的およびディープラーニングの解法の統合など、アルゴリズムの改善における今後の研究機会について述べる。
この批判的なレビューは、研究者やエンジニアがさまざまな物理層をニューラルネットワークに統合する方法を理解するための出発点となる。
関連論文リスト
- From Graphs to Qubits: A Critical Review of Quantum Graph Neural Networks [56.51893966016221]
量子グラフニューラルネットワーク(QGNN)は、量子コンピューティングとグラフニューラルネットワーク(GNN)の新たな融合を表す。
本稿では,QGNNの現状を批判的にレビューし,様々なアーキテクチャを探求する。
我々は、高エネルギー物理学、分子化学、ファイナンス、地球科学など多種多様な分野にまたがる応用について論じ、量子的優位性の可能性を強調した。
論文 参考訳(メタデータ) (2024-08-12T22:53:14Z) - Mechanistic Neural Networks for Scientific Machine Learning [58.99592521721158]
我々は、科学における機械学習応用のためのニューラルネットワーク設計であるメカニスティックニューラルネットワークを提案する。
新しいメカニスティックブロックを標準アーキテクチャに組み込んで、微分方程式を表現として明示的に学習する。
我々のアプローチの中心は、線形プログラムを解くために線形ODEを解く技術に着想を得た、新しい線形計画解法(NeuRLP)である。
論文 参考訳(メタデータ) (2024-02-20T15:23:24Z) - A Review of Neuroscience-Inspired Machine Learning [58.72729525961739]
バイオプルーシブル・クレジット・アサインメントは、事実上あらゆる学習条件と互換性があり、エネルギー効率が高い。
本稿では,人工ニューラルネットワークにおける信用代入の生体評価可能なルールをモデル化する,いくつかの重要なアルゴリズムについて検討する。
我々は,このようなアルゴリズムを実用アプリケーションでより有用にするためには,今後の課題に対処する必要があることを論じる。
論文 参考訳(メタデータ) (2024-02-16T18:05:09Z) - Spiking neural network for nonlinear regression [68.8204255655161]
スパイクニューラルネットワークは、メモリとエネルギー消費を大幅に削減する可能性を持っている。
彼らは、次世代のニューロモルフィックハードウェアによって活用できる時間的および神経的疎結合を導入する。
スパイキングニューラルネットワークを用いた回帰フレームワークを提案する。
論文 参考訳(メタデータ) (2022-10-06T13:04:45Z) - Neuromorphic Artificial Intelligence Systems [58.1806704582023]
フォン・ノイマンアーキテクチャと古典的ニューラルネットワークに基づく現代のAIシステムは、脳と比較して多くの基本的な制限がある。
この記事では、そのような制限と、それらが緩和される方法について論じる。
これは、これらの制限が克服されている現在利用可能なニューロモーフィックAIプロジェクトの概要を示す。
論文 参考訳(メタデータ) (2022-05-25T20:16:05Z) - Physics-informed ConvNet: Learning Physical Field from a Shallow Neural
Network [0.180476943513092]
マルチ物理システムのモデル化と予測は、避けられないデータ不足とノイズのために依然として課題である。
物理インフォームド・コンボリューション・ネットワーク(PICN)と呼ばれる新しいフレームワークは、CNNの観点から推奨されている。
PICNは物理インフォームド機械学習において、代替のニューラルネットワークソルバとなる可能性がある。
論文 参考訳(メタデータ) (2022-01-26T14:35:58Z) - Deep physical neural networks enabled by a backpropagation algorithm for
arbitrary physical systems [3.7785805908699803]
本稿では,ディープニューラルネットワークモデルを実現するための急進的な代替手段を提案する。
ニューラルネットとして機能する制御可能な物理システムのシーケンスを効率的に学習するために,物理認識トレーニングと呼ばれるハイブリッド物理デジタルアルゴリズムを導入する。
論文 参考訳(メタデータ) (2021-04-27T18:00:02Z) - Explainable artificial intelligence for mechanics: physics-informing
neural networks for constitutive models [0.0]
メカニクスにおいて、物理インフォームドニューラルネットワークの新しい活発な分野は、機械的知識に基づいてディープニューラルネットワークを設計することによって、この欠点を緩和しようとする。
本論文では,機械データに訓練されたニューラルネットワークを後述する物理形成型アプローチへの第一歩を提案する。
これにより、主成分分析はRNNの細胞状態における分散表現をデコレーションし、既知の基本関数との比較を可能にする。
論文 参考訳(メタデータ) (2021-04-20T18:38:52Z) - A deep learning theory for neural networks grounded in physics [2.132096006921048]
ニューロモルフィックアーキテクチャ上で大規模で高速で効率的なニューラルネットワークを構築するには、それらを実装および訓練するためのアルゴリズムを再考する必要がある。
私たちのフレームワークは、非常に幅広いモデル、すなわち状態やダイナミクスが変動方程式によって記述されるシステムに適用されます。
論文 参考訳(メタデータ) (2021-03-18T02:12:48Z) - Spiking Neural Networks Hardware Implementations and Challenges: a
Survey [53.429871539789445]
スパイキングニューラルネットワークは、ニューロンとシナプスの操作原理を模倣する認知アルゴリズムである。
スパイキングニューラルネットワークのハードウェア実装の現状について述べる。
本稿では,これらのイベント駆動アルゴリズムの特性をハードウェアレベルで活用するための戦略について論じる。
論文 参考訳(メタデータ) (2020-05-04T13:24:00Z) - Understanding and mitigating gradient pathologies in physics-informed
neural networks [2.1485350418225244]
この研究は、物理システムの結果を予測し、ノイズの多いデータから隠れた物理を発見するための物理情報ニューラルネットワークの有効性に焦点を当てる。
本稿では,モデル学習中の勾配統計を利用して,複合損失関数の異なる項間の相互作用のバランスをとる学習速度アニーリングアルゴリズムを提案する。
また、そのような勾配に耐性のある新しいニューラルネットワークアーキテクチャを提案する。
論文 参考訳(メタデータ) (2020-01-13T21:23:49Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。