論文の概要: Stability of Neural Networks on Manifolds to Relative Perturbations
- arxiv url: http://arxiv.org/abs/2110.04702v1
- Date: Sun, 10 Oct 2021 04:37:19 GMT
- ステータス: 処理完了
- システム内更新日: 2021-10-12 19:38:59.694881
- Title: Stability of Neural Networks on Manifolds to Relative Perturbations
- Title(参考訳): 多様体上のニューラルネットワークの相対摂動に対する安定性
- Authors: Zhiyang Wang and Luana Ruiz and Alejandro Ribeiro
- Abstract要約: グラフニューラルネットワーク(GNN)は多くの実践シナリオにおいて素晴らしいパフォーマンスを示している。
GNNは大規模グラフ上でうまくスケールすることができるが、これは既存の安定性がノード数とともに増加するという事実に矛盾する。
- 参考スコア(独自算出の注目度): 118.84154142918214
- License: http://creativecommons.org/licenses/by-nc-sa/4.0/
- Abstract: Graph Neural Networks (GNNs) show impressive performance in many practical
scenarios, which can be largely attributed to their stability properties.
Empirically, GNNs can scale well on large size graphs, but this is contradicted
by the fact that existing stability bounds grow with the number of nodes.
Graphs with well-defined limits can be seen as samples from manifolds. Hence,
in this paper, we analyze the stability properties of convolutional neural
networks on manifolds to understand the stability of GNNs on large graphs.
Specifically, we focus on stability to relative perturbations of the
Laplace-Beltrami operator. To start, we construct frequency ratio threshold
filters which separate the infinite-dimensional spectrum of the
Laplace-Beltrami operator. We then prove that manifold neural networks composed
of these filters are stable to relative operator perturbations. As a product of
this analysis, we observe that manifold neural networks exhibit a trade-off
between stability and discriminability. Finally, we illustrate our results
empirically in a wireless resource allocation scenario where the
transmitter-receiver pairs are assumed to be sampled from a manifold.
- Abstract(参考訳): グラフニューラルネットワーク(GNN)は多くの実践シナリオにおいて優れた性能を示しており、その安定性に大きく影響している。
経験的には、GNNは大きなグラフ上でうまくスケールすることができるが、これは既存の安定性がノード数とともに増加するという事実に矛盾する。
明確に定義された極限を持つグラフは多様体のサンプルと見なすことができる。
そこで本研究では,多様体上の畳み込みニューラルネットワークの安定性を解析し,大きなグラフ上のGNNの安定性を理解する。
具体的には、ラプラス・ベルトラミ作用素の相対摂動に対する安定性に着目する。
まず,ラプラス・ベルトラミ作用素の無限次元スペクトルを分離する周波数比しきい値フィルタを構築する。
そして、これらのフィルタからなる多様体ニューラルネットワークが相対作用素摂動に対して安定であることを証明する。
この分析の結果、多様体ニューラルネットワークは安定性と識別可能性のトレードオフを示すことがわかった。
最後に,送信者と受信者のペアが多様体からサンプリングされたと仮定した無線リソース割り当てシナリオで実験結果を示す。
関連論文リスト
- SAGMAN: Stability Analysis of Graph Neural Networks on the Manifolds [11.839398175390548]
現代のグラフニューラルネットワーク(GNN)は、入力グラフ構造やノードの特徴の変化に敏感である。
本稿では,GNNの安定性を調べるためのSAGMANと呼ばれるスペクトルフレームワークを提案する。
論文 参考訳(メタデータ) (2024-02-13T18:33:45Z) - On the Trade-Off between Stability and Representational Capacity in
Graph Neural Networks [22.751509906413943]
20以上のソリューションを統合する汎用GNNフレームワークであるEdgeNetの安定性について検討する。
異なるEdgeNetカテゴリの安定性への影響を調べた結果,パラメータ空間における自由度が低いGNNの方が,表現能力の低いGNNの方がより安定であることが判明した。
論文 参考訳(メタデータ) (2023-12-04T22:07:17Z) - Stable and Transferable Hyper-Graph Neural Networks [95.07035704188984]
グラフニューラルネットワーク(GNN)を用いたハイパーグラフでサポートする信号処理アーキテクチャを提案する。
スペクトル類似性により任意のグラフにまたがってGNNの安定性と転送可能性の誤差をバウンドするフレームワークを提供する。
論文 参考訳(メタデータ) (2022-11-11T23:44:20Z) - Stability of Aggregation Graph Neural Networks [153.70485149740608]
グラフの摂動を考慮したアグリゲーショングラフニューラルネットワーク(Agg-GNN)の安定性特性について検討した。
安定性境界は各ノードに作用するCNNの第1層におけるフィルタの特性によって定義される。
また、Agg-GNNでは、写像演算子の選択性は、CNNステージの第1層においてのみフィルタの特性に結びついていると結論付けている。
論文 参考訳(メタデータ) (2022-07-08T03:54:52Z) - Training Stable Graph Neural Networks Through Constrained Learning [116.03137405192356]
グラフニューラルネットワーク(GNN)は、ネットワークデータから機能を学ぶためにグラフ畳み込みに依存する。
GNNは、グラフフィルタから受け継いだ特性である、基礎となるグラフの様々な種類の摂動に対して安定である。
本稿では,GNNの安定条件に制約を課すことにより,新たな制約付き学習手法を提案する。
論文 参考訳(メタデータ) (2021-10-07T15:54:42Z) - Space-Time Graph Neural Networks [104.55175325870195]
本研究では、時空間グラフニューラルネットワーク(ST-GNN)を導入し、時間変動ネットワークデータの時空間トポロジを共同処理する。
解析の結果,システムのネットワークトポロジと時間進化の変動はST-GNNの性能に大きく影響しないことがわかった。
論文 参考訳(メタデータ) (2021-10-06T16:08:44Z) - Stability of Graph Convolutional Neural Networks to Stochastic
Perturbations [122.12962842842349]
グラフ畳み込みニューラルネットワーク(GCNN)は、ネットワークデータから表現を学ぶ非線形処理ツールである。
現在の分析では決定論的摂動を考慮しているが、トポロジカルな変化がランダムである場合、関連する洞察を与えられない。
本稿では,リンク損失に起因する乱れグラフ摂動に対するGCNNの安定性について検討する。
論文 参考訳(メタデータ) (2021-06-19T16:25:28Z) - On the Stability of Graph Convolutional Neural Networks under Edge
Rewiring [22.58110328955473]
グラフニューラルネットワークは、機械学習コミュニティ内で人気が高まっている。
しかし、その安定性、すなわち入力中の小さな摂動に対する頑健さは、まだよく理解されていない。
我々は,グラフニューラルネットワークが高次ノード間の切り換えに安定であることを示す,解釈可能な上界モデルを開発した。
論文 参考訳(メタデータ) (2020-10-26T17:37:58Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。