論文の概要: Defining Foundation Models for Computational Science: A Call for Clarity and Rigor
- arxiv url: http://arxiv.org/abs/2505.22904v2
- Date: Fri, 30 May 2025 16:21:57 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-06-02 12:43:13.143311
- Title: Defining Foundation Models for Computational Science: A Call for Clarity and Rigor
- Title(参考訳): 計算科学の基礎モデルの定義--明快さと理性への呼びかけ
- Authors: Youngsoo Choi, Siu Wun Cheung, Youngkyu Kim, Ping-Hsuan Tsai, Alejandro N. Diaz, Ivan Zanardi, Seung Whan Chung, Dylan Matthew Copeland, Coleman Kendrick, William Anderson, Traian Iliescu, Matthias Heinkenschloss,
- Abstract要約: 計算科学における基礎モデルの形式的定義を提案する。
このようなモデルが示すべき本質的で望ましい特徴の集合を具体化します。
データ駆動有限要素法(DD-FEM)は,従来のFEMのモジュラ構造をデータ駆動学習の表現力と融合させるフレームワークである。
- 参考スコア(独自算出の注目度): 30.432877421232842
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: The widespread success of foundation models in natural language processing and computer vision has inspired researchers to extend the concept to scientific machine learning and computational science. However, this position paper argues that as the term "foundation model" is an evolving concept, its application in computational science is increasingly used without a universally accepted definition, potentially creating confusion and diluting its precise scientific meaning. In this paper, we address this gap by proposing a formal definition of foundation models in computational science, grounded in the core values of generality, reusability, and scalability. We articulate a set of essential and desirable characteristics that such models must exhibit, drawing parallels with traditional foundational methods, like the finite element and finite volume methods. Furthermore, we introduce the Data-Driven Finite Element Method (DD-FEM), a framework that fuses the modular structure of classical FEM with the representational power of data-driven learning. We demonstrate how DD-FEM addresses many of the key challenges in realizing foundation models for computational science, including scalability, adaptability, and physics consistency. By bridging traditional numerical methods with modern AI paradigms, this work provides a rigorous foundation for evaluating and developing novel approaches toward future foundation models in computational science.
- Abstract(参考訳): 自然言語処理とコンピュータビジョンにおける基礎モデルの成功により、研究者はこの概念を科学的な機械学習と計算科学に拡張するよう促された。
しかしながら、このポジションペーパーは「基礎モデル」という用語が進化する概念であるので、計算科学におけるその応用は普遍的に受け入れられる定義を使わずにますます使われ、混乱を招き、その正確な科学的意味を希薄化する可能性があると論じている。
本稿では,一般性,再利用性,拡張性といったコア値に基づいて,計算科学における基礎モデルの形式的定義を提案することにより,このギャップに対処する。
有限要素法や有限体積法のような従来の基礎的手法と平行して、そのようなモデルが示さなければならない本質的で望ましい特徴の集合を具体的に表現する。
さらに、従来のFEMのモジュラ構造をデータ駆動学習の表現力と融合させるフレームワークであるデータ駆動有限要素法(DD-FEM)を導入する。
DD-FEMは、スケーラビリティ、適応性、物理の整合性など、計算科学の基礎モデルを実現する上で重要な課題にどのように対処するかを実証する。
従来の数値手法を現代のAIパラダイムでブリッジすることで、この研究は計算科学における将来の基礎モデルに向けた新しいアプローチを評価し開発するための厳密な基礎を提供する。
関連論文リスト
- Machine Learned Force Fields: Fundamentals, its reach, and challenges [0.0]
機械学習力場(MLFF)は、計算化学と材料科学における革命的なアプローチとして登場した。
この章では、学習の基本と、それがMLFFの構築に適用される方法を紹介します。
もっとも要素的なニューラルネットワークに基づく力場のひとつとして、SchNetモデルの構築に重点を置いている。
論文 参考訳(メタデータ) (2025-03-07T05:26:14Z) - A Hybrid Virtual Element Method and Deep Learning Approach for Solving One-Dimensional Euler-Bernoulli Beams [0.0]
深層学習にVirtual Element Method(VEM)を統合するハイブリッドフレームワークを提案する。
主な目的は、様々な物質変位のフィールドを予測できるデータ駆動サロゲートモデルを探索することである。
ニューラルネットワークアーキテクチャを導入して、ノイズと物質固有のデータを別々に処理し、複雑なインタラクションを効果的にキャプチャする。
論文 参考訳(メタデータ) (2025-01-12T20:34:26Z) - Large Physics Models: Towards a collaborative approach with Large Language Models and Foundation Models [8.320153035338418]
本稿では、物理固有の大規模AIモデルの開発と評価のためのアイデアを探求し、潜在的ロードマップを提供する。
これらのモデルは、Large Language Models (LLMs) のような基礎モデルに基づいており、物理学研究の要求に対応するように調整されている。
論文 参考訳(メタデータ) (2025-01-09T17:11:22Z) - Learning Interpretable Concepts: Unifying Causal Representation Learning and Foundation Models [80.32412260877628]
人間の解釈可能な概念をデータから学習する方法を研究する。
両分野からアイデアをまとめ、多様なデータから概念を確実に回収できることを示す。
論文 参考訳(メタデータ) (2024-02-14T15:23:59Z) - Discovering Interpretable Physical Models using Symbolic Regression and
Discrete Exterior Calculus [55.2480439325792]
本稿では,記号回帰(SR)と離散指数計算(DEC)を組み合わせて物理モデルの自動発見を行うフレームワークを提案する。
DECは、SRの物理問題への最先端の応用を越えている、場の理論の離散的な類似に対して、ビルディングブロックを提供する。
実験データから連続体物理の3つのモデルを再発見し,本手法の有効性を実証する。
論文 参考訳(メタデータ) (2023-10-10T13:23:05Z) - Thermodynamics-inspired Explanations of Artificial Intelligence [0.0]
我々は、AIと他のブラックボックスパラダイム(TERP)の説明可能な表現を提示する。
TERPは、モデルに依存しない方法でブラックボックス予測のための正確で人間の解釈可能な説明を生成する方法である。
TERPの広範囲な適用性を実証するため,様々なブラックボックスモデルアーキテクチャの解説に成功している。
論文 参考訳(メタデータ) (2022-06-27T17:36:50Z) - An Extensible Benchmark Suite for Learning to Simulate Physical Systems [60.249111272844374]
我々は、統一されたベンチマークと評価プロトコルへの一歩を踏み出すために、一連のベンチマーク問題を導入する。
本稿では,4つの物理系と,広く使用されている古典的時間ベースおよび代表的なデータ駆動手法のコレクションを提案する。
論文 参考訳(メタデータ) (2021-08-09T17:39:09Z) - Physics-Guided Deep Learning for Dynamical Systems: A survey [5.733401663293044]
伝統的な物理学に基づくモデルは解釈可能であるが、厳密な仮定に依存している。
ディープラーニングは、複雑なパターンを効率的に認識し、非線形力学をエミュレートするための新しい代替手段を提供する。
物理学に基づくモデリングと最先端のDLモデルの両方を最大限に活用して、科学的な問題を解決することを目指している。
論文 参考訳(メタデータ) (2021-07-02T20:59:03Z) - Formalising Concepts as Grounded Abstractions [68.24080871981869]
このレポートは、表現学習が生データから概念を誘導する方法を示しています。
このレポートの主な技術的目標は、表現学習のテクニックが概念空間の格子理論的定式化とどのように結婚できるかを示すことである。
論文 参考訳(メタデータ) (2021-01-13T15:22:01Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。