論文の概要: FlowPool: Pooling Graph Representations with Wasserstein Gradient Flows
- arxiv url: http://arxiv.org/abs/2112.09990v1
- Date: Sat, 18 Dec 2021 20:07:06 GMT
- ステータス: 処理完了
- システム内更新日: 2021-12-21 17:16:43.304889
- Title: FlowPool: Pooling Graph Representations with Wasserstein Gradient Flows
- Title(参考訳): FlowPool: Wasserstein Gradient Flowsを用いたグラフ表現のポーリング
- Authors: Effrosyni Simou
- Abstract要約: 既存のグラフプーリング法は、グラフ表現とそのプールバージョンとの類似性に関して保証を提供しない。
本稿では,ワッサーシュタイン距離を最小にすることで,グラフ表現の統計をプールされたデータに最適に保存するプーリング法であるFlowPoolを提案する。
本手法は自動微分が可能であり,エンドツーエンドのディープラーニングアーキテクチャに組み込むことができる。
- 参考スコア(独自算出の注目度): 3.655021726150369
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: In several machine learning tasks for graph structured data, the graphs under
consideration may be composed of a varying number of nodes. Therefore, it is
necessary to design pooling methods that aggregate the graph representations of
varying size to representations of fixed size which can be used in downstream
tasks, such as graph classification. Existing graph pooling methods offer no
guarantee with regards to the similarity of a graph representation and its
pooled version. In this work we address this limitation by proposing FlowPool,
a pooling method that optimally preserves the statistics of a graph
representation to its pooled counterpart by minimizing their Wasserstein
distance. This is achieved by performing a Wasserstein gradient flow with
respect to the pooled graph representation. We propose a versatile
implementation of our method which can take into account the geometry of the
representation space through any ground cost. This implementation relies on the
computation of the gradient of the Wasserstein distance with recently proposed
implicit differentiation schemes. Our pooling method is amenable to automatic
differentiation and can be integrated in end-to-end deep learning
architectures. Further, FlowPool is invariant to permutations and can therefore
be combined with permutation equivariant feature extraction layers in GNNs in
order to obtain predictions that are independent of the ordering of the nodes.
Experimental results demonstrate that our method leads to an increase in
performance compared to existing pooling methods when evaluated in graph
classification tasks.
- Abstract(参考訳): グラフ構造化データの機械学習タスクでは、検討中のグラフは、さまざまな数のノードで構成されている可能性がある。
したがって、グラフ分類などの下流タスクで使用できる固定サイズの表現に対して、さまざまなサイズのグラフ表現を集約するプーリング方法を設計する必要がある。
既存のグラフプーリングメソッドは、グラフ表現とそのプーリングバージョンとの類似性については保証しない。
本研究では,Wasserstein 距離を最小にすることで,グラフ表現の統計をプールされたものに最適に保存するプーリング手法である FlowPool を提案する。
これは、プールグラフ表現に関してワッサーシュタイン勾配流を実行することで達成される。
本手法は,任意の地上コストで表現空間の形状を考慮に入れることができる汎用的な実装を提案する。
この実装は、最近提案された暗黙的な微分スキームとワッサースタイン距離の勾配の計算に依存する。
プール方式は自動微分に適しており、エンドツーエンドのディープラーニングアーキテクチャに統合することができる。
さらに、フロープールは置換に不変であり、したがって、ノードの順序に依存しない予測を得るために、gnnの置換同変特徴抽出層と組み合わせることができる。
実験の結果, グラフ分類タスクで評価した場合, 既存のプーリング法と比較して, 性能が向上することが示された。
関連論文リスト
- SSHPool: The Separated Subgraph-based Hierarchical Pooling [47.78745802682822]
グラフ分類のための新しい局所グラフプーリング法,すなわち分離部分グラフベース階層プール(SSH)を開発した。
局所グラフ畳み込み単位を局所構造として個別に用いて各部分グラフをより粗いノードに圧縮する。
我々は、グラフ分類のためのSSHPoolモジュールに関連するエンドツーエンドのGNNフレームワークを開発する。
論文 参考訳(メタデータ) (2024-03-24T13:03:35Z) - Careful Selection and Thoughtful Discarding: Graph Explicit Pooling
Utilizing Discarded Nodes [53.08068729187698]
本稿では,ノードと最終表現ベクトルの関係を明示的に活用してノードを選択するグラフ明示プール法を提案する。
提案手法の有効性を検証するため,12種類の広く使用されているデータセットを対象とした総合的な実験を行った。
論文 参考訳(メタデータ) (2023-11-21T14:44:51Z) - Edge but not Least: Cross-View Graph Pooling [76.71497833616024]
本稿では,重要なグラフ構造情報を活用するために,クロスビューグラフプーリング(Co-Pooling)手法を提案する。
クロスビュー相互作用、エッジビュープーリング、ノードビュープーリングにより、相互にシームレスに強化され、より情報的なグラフレベルの表現が学習される。
論文 参考訳(メタデータ) (2021-09-24T08:01:23Z) - Structure-Aware Hierarchical Graph Pooling using Information Bottleneck [2.7088996845250897]
グラフプーリングは、グラフ分類および回帰タスクにおけるグラフニューラルネットワーク(GNN)の重要な要素です。
本稿では,情報ボトルネック(IB)の原理を応用した,HIBPoolという新しいプール手法を提案する。
また,グラフの局所部分グラフ構造をキャプチャするために,新しい構造認識型識別プーリング読み出し(dip-readout)関数を導入する。
論文 参考訳(メタデータ) (2021-04-27T07:27:43Z) - Accurate Learning of Graph Representations with Graph Multiset Pooling [45.72542969364438]
本稿では,その構造的依存関係に応じてノード間の相互作用をキャプチャするグラフマルチセットトランス (GMT) を提案する。
実験の結果,GMTはグラフ分類ベンチマークにおいて,最先端のグラフプーリング法を著しく上回っていることがわかった。
論文 参考訳(メタデータ) (2021-02-23T07:45:58Z) - Second-Order Pooling for Graph Neural Networks [62.13156203025818]
グラフプーリングとして2次プールを提案するが、これは上記の課題を自然に解決する。
グラフニューラルネットワークによる2次プールの直接利用は、実用的な問題を引き起こすことを示す。
本稿では,2次プールに基づく2つの新しいグローバルグラフプーリング手法,すなわちバイリニアマッピングと2次プールを提案する。
論文 参考訳(メタデータ) (2020-07-20T20:52:36Z) - Graph Pooling with Node Proximity for Hierarchical Representation
Learning [80.62181998314547]
本稿では,ノード近接を利用したグラフプーリング手法を提案し,そのマルチホップトポロジを用いたグラフデータの階層的表現学習を改善する。
その結果,提案したグラフプーリング戦略は,公開グラフ分類ベンチマークデータセットの集合において,最先端のパフォーマンスを達成できることが示唆された。
論文 参考訳(メタデータ) (2020-06-19T13:09:44Z) - Sequential Graph Convolutional Network for Active Learning [53.99104862192055]
逐次グラフ畳み込みネットワーク(GCN)を用いた新しいプールベースアクティブラーニングフレームワークを提案する。
少数のランダムなサンプル画像がシードラベル付き例であるので、グラフのパラメータを学習してラベル付きノードと非ラベル付きノードを区別する。
我々はGCNの特性を利用してラベル付けされたものと十分に異なる未ラベルの例を選択する。
論文 参考訳(メタデータ) (2020-06-18T00:55:10Z) - Wasserstein Embedding for Graph Learning [33.90471037116372]
Wasserstein Embedding for Graph Learning (WEGL)は、グラフ全体をベクトル空間に埋め込むフレームワークである。
グラフ間の類似性をノード埋め込み分布間の類似性の関数として定義する上で,新たな知見を活用する。
各種ベンチマークグラフ固有性予測タスクにおける新しいグラフ埋め込み手法の評価を行った。
論文 参考訳(メタデータ) (2020-06-16T18:23:00Z) - Wasserstein-based Graph Alignment [56.84964475441094]
我々は,より小さいグラフのノードと大きなグラフのノードをマッチングすることを目的とした,1対多のグラフアライメント問題に対する新しい定式化を行った。
提案手法は,各タスクに対する最先端のアルゴリズムに対して,大幅な改善をもたらすことを示す。
論文 参考訳(メタデータ) (2020-03-12T22:31:59Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。