論文の概要: Checkable NTK Positivity and Finite-Width Gradient Descent for Scalar- and Vector-Valued PINNs with Strong-Form, Weak-Form, and Nonlocal Linear Constraints
- arxiv url: http://arxiv.org/abs/2610.04357v1
- Date: Sat, 03 Oct 2026 07:52:00 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-12 11:13:05.90861
- Title: Checkable NTK Positivity and Finite-Width Gradient Descent for Scalar- and Vector-Valued PINNs with Strong-Form, Weak-Form, and Nonlocal Linear Constraints
- Title(参考訳): 強い形, 弱形および非局所線形制約を持つスカラーおよびベクトル値PINNのチェック可能なNTK陽性と有限幅勾配
- Abstract要約: ニューラル・タンジェント・カーネル(NTK)のチェック可能な正定性基準
物理インフォームドニューラルネットワーク(PINN)の高確率有限幅勾配輝度保証
- 参考スコア(独自算出の注目度): 0.0
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: We give checkable positive-definiteness criteria for the limiting neural tangent kernel (NTK) and high-probability finite-width gradient-descent guarantees for scalar- or vector-valued physics-informed neural networks (PINNs) with linear constraints. The constraints may be strong-form differential rows of any fixed finite order, including coupled systems, with any linear initial or boundary conditions; weak-form residual and boundary functionals; or finite-measure nonlocal observations such as integral, nonlocal-diffusion, and Dirac-data rows, all in any dimension. For each class, positive definiteness of the limiting NTK is equivalent to a rank condition on a finite coefficient, functional, or moment matrix of the fixed design: a certificate computed before training that detects structural zero modes. The model hypotheses are those of an ordinary two-layer PINN, a smooth nonpolynomial activation with bounded symmetric initialization, and are met by standard choices such as $\tanh$ with uniform initialization. Given a certificate, explicit width and step-size conditions ensure, with high probability, that the empirical NTK retains at least half the limiting gap and that full-batch gradient descent decreases the training loss geometrically at every iteration. Controlled experiments check the certificates and the finite-width mechanism.
- Abstract(参考訳): 我々は、線形制約付きスカラーまたはベクトル値の物理インフォームドニューラルネットワーク(PINN)に対して、制限型ニューラルネットワーク(NTK)の正定性基準と高確率有限幅勾配ディフレッシュ保証を与える。
この制約は、線形初期あるいは境界条件を含む結合系を含む任意の固定有限順序の強い形式微分列、弱形式残差と境界函数、あるいは積分、非局所拡散、ディラックデータ列のような有限測度非局所的な観測である。
各クラスについて、制限NTKの正の定性は、有限係数、関数、または固定設計のモーメント行列上のランク条件と等価である: 構造ゼロモードを検出する訓練前に計算された証明書。
モデル仮説は、有界対称初期化を伴う滑らかな非ポリノミカル活性化である通常の二層PINNのものであり、一様初期化を持つ$\tanh$のような標準選択によって満たされる。
証明が与えられた場合、明示的な幅とステップサイズ条件は、高い確率で、経験的NTKが少なくとも半分の制限ギャップを保持し、フルバッチ勾配降下は、反復毎に幾何的にトレーニング損失を減少させる。
制御された実験は証明書と有限幅機構をチェックする。
関連論文リスト
- Linearized PINN with pretrained nonlinear layers [48.01541150431857]
lPINNは、前方および逆微分方程式の低次ニューラルネットワーク基底法である。
我々は, 対流拡散方程式, バーガーズ方程式, 非線形振り子方程式に対する逆問題に対する lPINN の評価を行った。
論文 参考訳(メタデータ) (2026-09-14T02:18:00Z) - High-probability guarantees for linear accessibility in feature superposition [0.2538209532048867]
クロスフィーチャー干渉は、同時にアクティブな特徴の線形アクセシビリティを制限する。
ガウス雑音下での固定支持に対する高確率境界を導出する。
これらの結果は、スパースオートエンコーダ、構成一般化、神経解釈可能性を評価するためのフレームワークを提供する。
論文 参考訳(メタデータ) (2026-09-09T00:26:35Z) - A Convex Quasilinearization Method for Solving Nonlinear PDEs with Physics-Informed Neural Networks [0.0]
非線形偏微分方程式(PDE)の前方解の数値解法を提案する。
この方法であるLiL-Qは、7つのベンチマークで評価され(平面ひずみ弾性と2次元および3次元の非圧縮性ナビエ・ストークス方程式)、不均一な透水性を持つ定常流を含む。
論文 参考訳(メタデータ) (2026-06-16T17:09:59Z) - Certified and accurate computation of function space norms of deep neural networks [0.547472179735134]
本稿では、LebesgueやSobolevのノルムを含む、ニューラルネットワークの積分量を計算するためのフレームワークを提案する。
関数値と導関数に対する保証された下限と上限を計算し、これらの局所証明を対象積分に対する大域的下限と上限に伝播する。
これらの成分がPINN内部残基の実用的証明限界にどのように結びつくかを示す。
論文 参考訳(メタデータ) (2026-03-06T16:08:16Z) - Graph-based Clustering Revisited: A Relaxation of Kernel $k$-Means Perspective [73.18641268511318]
本稿では,クラスタリング結果を導出するための正規制約のみを緩和するグラフベースのクラスタリングアルゴリズムを提案する。
二重制約を勾配に変換するために、非負の制約をクラス確率パラメータに変換する。
論文 参考訳(メタデータ) (2025-09-23T09:14:39Z) - Low-Rank Tensor Recovery via Variational Schatten-p Quasi-Norm and Jacobian Regularization [49.85875869048434]
暗黙的神経表現のためのニューラルネットワークによりパラメータ化されたCPベースの低ランクテンソル関数を提案する。
本研究では、スペーサーCP分解を実現するために、冗長なランク1成分に変分Schatten-p quasi-normを導入する。
滑らか性のために、ヤコビアンとハッチンソンのトレース推定器のスペクトルノルムに基づく正規化項を提案する。
論文 参考訳(メタデータ) (2025-06-27T11:23:10Z) - A Local Polyak-Lojasiewicz and Descent Lemma of Gradient Descent For Overparametrized Linear Models [6.734175048463699]
正方形損失を学習した2層線形ニューラルネットワークの勾配降下に対する線形収束率を導出した。
我々の収束分析は、事前の結果を改善するだけでなく、ステップサイズに対するより良い選択を示唆している。
論文 参考訳(メタデータ) (2025-05-16T19:57:22Z) - Learning with Norm Constrained, Over-parameterized, Two-layer Neural Networks [54.177130905659155]
近年の研究では、再生カーネルヒルベルト空間(RKHS)がニューラルネットワークによる関数のモデル化に適した空間ではないことが示されている。
本稿では,有界ノルムを持つオーバーパラメータ化された2層ニューラルネットワークに適した関数空間について検討する。
論文 参考訳(メタデータ) (2024-04-29T15:04:07Z) - Approximation Results for Gradient Descent trained Neural Networks [0.0]
ネットワークは完全に接続された一定の深さ増加幅である。
連続カーネルエラーノルムは、滑らかな関数に必要な自然な滑らかさの仮定の下での近似を意味する。
論文 参考訳(メタデータ) (2023-09-09T18:47:55Z) - Deep Learning Approximation of Diffeomorphisms via Linear-Control
Systems [91.3755431537592]
我々は、制御に線形に依存する$dot x = sum_i=1lF_i(x)u_i$という形の制御系を考える。
対応するフローを用いて、コンパクトな点のアンサンブル上の微分同相写像の作用を近似する。
論文 参考訳(メタデータ) (2021-10-24T08:57:46Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。