論文の概要: A Fractional Graph Laplacian Approach to Oversmoothing
- arxiv url: http://arxiv.org/abs/2305.13084v1
- Date: Mon, 22 May 2023 14:52:33 GMT
- ステータス: 処理完了
- システム内更新日: 2023-05-23 15:15:45.470360
- Title: A Fractional Graph Laplacian Approach to Oversmoothing
- Title(参考訳): 分数グラフラプラシアンによるオーバースムーシングのアプローチ
- Authors: Sohir Maskey, Raffaele Paolino, Aras Bacho, Gitta Kutyniok
- Abstract要約: 非直交グラフから有向グラフへのオーバースムーシングの概念を一般化する。
非局所力学を記述した分数グラフ Laplacian Neural ODE を提案する。
グラフのディリクレエネルギーの収束に関して、我々の方法はより柔軟である。
- 参考スコア(独自算出の注目度): 2.4832703558223725
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Graph neural networks (GNNs) have shown state-of-the-art performances in
various applications. However, GNNs often struggle to capture long-range
dependencies in graphs due to oversmoothing. In this paper, we generalize the
concept of oversmoothing from undirected to directed graphs. To this aim, we
extend the notion of Dirichlet energy by considering a directed symmetrically
normalized Laplacian. As vanilla graph convolutional networks are prone to
oversmooth, we adopt a neural graph ODE framework. Specifically, we propose
fractional graph Laplacian neural ODEs, which describe non-local dynamics. We
prove that our approach allows propagating information between distant nodes
while maintaining a low probability of long-distance jumps. Moreover, we show
that our method is more flexible with respect to the convergence of the graph's
Dirichlet energy, thereby mitigating oversmoothing. We conduct extensive
experiments on synthetic and real-world graphs, both directed and undirected,
demonstrating our method's versatility across diverse graph homophily levels.
Our code is available at https://github.com/RPaolino/fLode .
- Abstract(参考訳): グラフニューラルネットワーク(GNN)は、様々なアプリケーションで最先端のパフォーマンスを示している。
しかしながら、GNNはオーバースムーシングのため、グラフ内の長距離依存関係をキャプチャするのに苦労することが多い。
本稿では,非有向グラフから有向グラフへのオーバーモーシングの概念を一般化する。
この目的のために、方向対称正規化ラプラシアンを考えることによりディリクレエネルギーの概念を拡張する。
バニラグラフ畳み込みネットワークは過スムースになりがちであるので、我々はニューラルグラフODEフレームワークを採用する。
具体的には,非局所ダイナミクスを記述する分数グラフラプラシアンニューラルodeを提案する。
提案手法は,長距離ジャンプの確率を低く保ちながら,遠隔ノード間の情報伝達を可能にする。
さらに, この手法はグラフのディリクレエネルギーの収束に関してより柔軟であり, オーバースムーシングを緩和できることを示した。
我々は,多彩なグラフホモフィリーレベルにまたがる手法の汎用性を実証し,指向性および非指向性の両方において,合成および実世界のグラフに関する広範な実験を行った。
私たちのコードはhttps://github.com/RPaolino/fLodeで利用可能です。
関連論文リスト
- Improving Graph Neural Networks by Learning Continuous Edge Directions [0.0]
グラフニューラルネットワーク(GNN)は、従来、非指向グラフ上の拡散に似たメッセージパッシング機構を採用している。
私たちのキーとなる洞察は、ファジィエッジ方向をグラフのエッジに割り当てることです。
ファジィエッジを持つグラフを学習するためのフレームワークとして,Continuous Edge Direction (CoED) GNNを提案する。
論文 参考訳(メタデータ) (2024-10-18T01:34:35Z) - Uplifting the Expressive Power of Graph Neural Networks through Graph
Partitioning [3.236774847052122]
グラフ分割のレンズによるグラフニューラルネットワークの表現力について検討する。
我々は新しいGNNアーキテクチャ、すなわちグラフ分割ニューラルネットワーク(GPNN)を導入する。
論文 参考訳(メタデータ) (2023-12-14T06:08:35Z) - Advective Diffusion Transformers for Topological Generalization in Graph
Learning [69.2894350228753]
グラフ拡散方程式は、様々なグラフトポロジーの存在下で、どのように外挿して一般化するかを示す。
本稿では,新たなグラフエンコーダのバックボーンであるAdvective Diffusion Transformer (ADiT)を提案する。
論文 参考訳(メタデータ) (2023-10-10T08:40:47Z) - Training Graph Neural Networks on Growing Stochastic Graphs [114.75710379125412]
グラフニューラルネットワーク(GNN)は、ネットワーク化されたデータの意味のあるパターンを活用するために、グラフ畳み込みに依存している。
我々は,成長するグラフ列の極限オブジェクトであるグラフオンを利用して,非常に大きなグラフ上のGNNを学習することを提案する。
論文 参考訳(メタデータ) (2022-10-27T16:00:45Z) - Gradient Gating for Deep Multi-Rate Learning on Graphs [62.25886489571097]
グラフニューラルネットワーク(GNN)の性能向上のための新しいフレームワークであるグラディエントゲーティング(G$2$)を提案する。
我々のフレームワークは,GNN層の出力を,基盤となるグラフのノード間でのメッセージパッシング情報のマルチレートフローのメカニズムでゲーティングすることに基づいている。
論文 参考訳(メタデータ) (2022-10-02T13:19:48Z) - Learning Graph Structure from Convolutional Mixtures [119.45320143101381]
本稿では、観測されたグラフと潜伏グラフのグラフ畳み込み関係を提案し、グラフ学習タスクをネットワーク逆(デコンボリューション)問題として定式化する。
固有分解に基づくスペクトル法の代わりに、近似勾配反復をアンロール・トランケートして、グラフデコンボリューションネットワーク(GDN)と呼ばれるパラメータ化ニューラルネットワークアーキテクチャに到達させる。
GDNは、教師付き方式でグラフの分布を学習し、損失関数を適応させることでリンク予測やエッジウェイト回帰タスクを実行し、本質的に帰納的である。
論文 参考訳(メタデータ) (2022-05-19T14:08:15Z) - Dirichlet Graph Variational Autoencoder [65.94744123832338]
本稿では,グラフクラスタメンバシップを潜在因子とするDGVAE(Dirichlet Graph Variational Autoencoder)を提案する。
バランスグラフカットにおける低パス特性により、入力グラフをクラスタメンバシップにエンコードする、Heattsと呼ばれるGNNの新しい変種を提案する。
論文 参考訳(メタデータ) (2020-10-09T07:35:26Z) - Implicit Graph Neural Networks [46.0589136729616]
Indicit Graph Neural Networks (IGNN) と呼ばれるグラフ学習フレームワークを提案する。
IGNNは一貫して長距離依存を捉え、最先端のGNNモデルより優れている。
論文 参考訳(メタデータ) (2020-09-14T06:04:55Z) - Graph Pooling with Node Proximity for Hierarchical Representation
Learning [80.62181998314547]
本稿では,ノード近接を利用したグラフプーリング手法を提案し,そのマルチホップトポロジを用いたグラフデータの階層的表現学習を改善する。
その結果,提案したグラフプーリング戦略は,公開グラフ分類ベンチマークデータセットの集合において,最先端のパフォーマンスを達成できることが示唆された。
論文 参考訳(メタデータ) (2020-06-19T13:09:44Z) - The Power of Graph Convolutional Networks to Distinguish Random Graph
Models: Short Version [27.544219236164764]
グラフ畳み込みネットワーク(GCN)はグラフ表現学習において広く使われている手法である。
サンプルグラフの埋め込みに基づいて異なるランダムグラフモデルを区別するGCNのパワーについて検討する。
論文 参考訳(メタデータ) (2020-02-13T17:58:42Z) - Theoretically Expressive and Edge-aware Graph Learning [24.954342094176013]
この分野における最近の進歩と組み合わせた新しいグラフニューラルネットワークを提案する。
我々は,このモデルがグラフ同型ネットワークやグラフニューラルネットワークよりも厳密に一般化されていることを証明した。
論文 参考訳(メタデータ) (2020-01-24T13:43:39Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。