論文の概要: Topological Neural Tangent Kernel
- arxiv url: http://arxiv.org/abs/2605.01110v1
- Date: Fri, 01 May 2026 21:31:08 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-05-05 20:33:49.588717
- Title: Topological Neural Tangent Kernel
- Title(参考訳): トポロジカルニューラルタンジェントカーネル
- Authors: Sanjukta Krishnagopal,
- Abstract要約: TopoNTK(トポロジカル・ニューラル・カーネル・タンジェント)は,エッジ機能を用いた単純なメッセージパッシングのための無限幅カーネルである。
我々は、表現性、ホッジアライメント、スペクトル学習、安定性を証明し、それらを合成単純タスクおよびDBLP高次リンク予測で検証する。
- 参考スコア(独自算出の注目度): 2.0305676256390934
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Graph neural tangent kernels give a principled infinite-width theory for graph neural networks, but inherit a basic limitation of graph models: they see only pairwise structure. Many relational systems contain higher-order interactions that are more naturally represented by simplicial complexes. We introduce the Topological Neural Tangent Kernel (TopoNTK), an infinite-width kernel for simplicial message passing on edge features. TopoNTK combines lower Hodge interactions, capturing graph-like coupling through shared vertices, with upper Hodge interactions, capturing coupling through filled simplices. This makes the kernel sensitive to topology invisible to graph kernels, allowing complexes with the same graph but different filled simplices to induce different kernels. Beyond expressivity, the Hodge structure gives the kernel an interpretable learning geometry. Edge signals decompose into gradient-like, harmonic, and local circulation components, and the spectrum of the TopoNTK determines how quickly each component is learned. This yields a topological form of spectral bias: components aligned with large-eigenvalue modes are learned quickly, while global harmonic modes, retained through the residual channel, often lie at smaller eigenvalues and are learned more slowly. We prove expressivity, Hodge-alignment, spectral learning, and stability properties, and validate them on synthetic simplicial tasks and DBLP higher-order link prediction. The results show that topology is not merely extra structure; it can provide coordinates that make relational learning more faithful, interpretable, and effective.
- Abstract(参考訳): グラフニューラル・タンジェント・カーネルは、グラフニューラルネットワークに対して原則化された無限幅理論を与えるが、グラフモデルの基本的制限を継承する。
多くの関係系は、より自然に単体錯体によって表される高次相互作用を含む。
TopoNTK(トポロジカル・ニューラル・タンジェント・カーネル)は,エッジ機能を用いた単純なメッセージパッシングのための無限幅カーネルである。
TopoNTKは、低いホッジ相互作用を結合し、グラフのようなカップリングを共有頂点を通して、上部ホッジ相互作用と組み合わせ、充填された単純化によってカップリングをキャプチャする。
これにより、トポロジに敏感なカーネルはグラフカーネルに見えず、同じグラフを持つが異なる充填された単純さで異なるカーネルを誘導することができる。
表現性以外にも、ホッジ構造はカーネルに解釈可能な学習幾何学を与える。
エッジ信号は勾配、高調波、局所循環成分に分解され、TopoNTKのスペクトルは各成分の学習速度を決定する。
大きな固有値モードに整列した成分は素早く学習され、大域的調和モードは残留チャネルを通して保持され、しばしばより小さな固有値に置かれ、よりゆっくりと学習される。
我々は、表現性、ホッジアライメント、スペクトル学習、安定性を証明し、それらを合成単純タスクおよびDBLP高次リンク予測で検証する。
その結果、トポロジは単なる余分な構造ではなく、関係学習をより忠実で、解釈可能で、効果的にするための座標を提供することができた。
関連論文リスト
- Stationarity and Spectral Characterization of Random Signals on Simplicial Complexes [45.01439616647312]
単体錯体上で定義されたランダム信号に対する確率的フレームワークを提案する。
具体的には、定常性の古典的な概念を一般化する。
複数の合成および実世界のシミュレーションを通して、これらの利点の実用性を実証的に実証する。
論文 参考訳(メタデータ) (2026-02-03T03:31:10Z) - Spectro-Riemannian Graph Neural Networks [39.901731107377095]
Cusp Laplacian は、Ollivier-Ricci曲率に基づく伝統的なグラフ Laplacian の拡張である。
Cusp Poolingは階層的な注意機構であり、曲率ベースの位置符号化と組み合わせている。
論文 参考訳(メタデータ) (2025-02-01T11:31:01Z) - Simple and Efficient Heterogeneous Graph Neural Network [55.56564522532328]
不均一グラフニューラルネットワーク(HGNN)は、不均一グラフの豊富な構造的および意味的な情報をノード表現に埋め込む強力な能力を持つ。
既存のHGNNは、同種グラフ上のグラフニューラルネットワーク(GNN)から多くのメカニズム、特に注意機構と多層構造を継承する。
本稿では,これらのメカニズムを詳細に検討し,簡便かつ効率的なヘテロジニアスグラフニューラルネットワーク(SeHGNN)を提案する。
論文 参考訳(メタデータ) (2022-07-06T10:01:46Z) - Discovering the Representation Bottleneck of Graph Neural Networks from
Multi-order Interactions [51.597480162777074]
グラフニューラルネットワーク(GNN)は、ノード機能を伝搬し、インタラクションを構築するためにメッセージパッシングパラダイムに依存している。
最近の研究は、異なるグラフ学習タスクはノード間の異なる範囲の相互作用を必要とすることを指摘している。
科学領域における2つの共通グラフ構築法、すなわち、emphK-nearest neighbor(KNN)グラフとemphfully-connected(FC)グラフについて検討する。
論文 参考訳(メタデータ) (2022-05-15T11:38:14Z) - Deep Architecture Connectivity Matters for Its Convergence: A
Fine-Grained Analysis [94.64007376939735]
我々は、勾配降下訓練におけるディープニューラルネットワーク(DNN)の収束に対する接続パターンの影響を理論的に特徴づける。
接続パターンの単純なフィルタリングによって、評価対象のモデルの数を削減できることが示される。
論文 参考訳(メタデータ) (2022-05-11T17:43:54Z) - Neural Sheaf Diffusion: A Topological Perspective on Heterophily and
Oversmoothing in GNNs [16.88394293874848]
セルラーシーフ理論を用いて、グラフの基盤となる幾何学がGNNの性能と深く関連していることを示す。
一般化されたシーブの階層構造を考慮し、無限時間極限におけるクラスの線形分離を実現するための層拡散過程の能力がいかに拡大するかを考察する。
我々は, せん断が非自明な場合, 離散パラメトリック拡散過程はGNNよりもその挙動を制御できることを証明した。
論文 参考訳(メタデータ) (2022-02-09T17:25:02Z) - Improving Spectral Graph Convolution for Learning Graph-level
Representation [27.76697047602983]
グラフ全体の表現を学習するためには,ノード間の基本的な関係を特徴付けるため,位相的距離が必要と考えられる。
グラフフィルタの制限を取り除くことで、新たなアーキテクチャによってグラフ表現の学習のパフォーマンスが大幅に向上する。
これは、よく知られたスペクトル/ローパスフィルタと比較して、入力信号に対するスペクトルの影響を定量的に測定する理解として機能する。
論文 参考訳(メタデータ) (2021-12-14T04:50:46Z) - Dist2Cycle: A Simplicial Neural Network for Homology Localization [66.15805004725809]
単純複体は多方向順序関係を明示的にエンコードするグラフの高次元一般化と見なすことができる。
単体錯体の$k$-homological特徴によってパラメータ化された関数のグラフ畳み込みモデルを提案する。
論文 参考訳(メタデータ) (2021-10-28T14:59:41Z) - Spectral-Spatial Global Graph Reasoning for Hyperspectral Image
Classification [50.899576891296235]
畳み込みニューラルネットワークは、ハイパースペクトル画像分類に広く応用されている。
近年の手法は空間トポロジのグラフ畳み込みによってこの問題に対処しようとしている。
論文 参考訳(メタデータ) (2021-06-26T06:24:51Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。