論文の概要: coVariance Neural Networks
- arxiv url: http://arxiv.org/abs/2205.15856v1
- Date: Tue, 31 May 2022 15:04:43 GMT
- ステータス: 処理完了
- システム内更新日: 2022-06-01 17:52:20.807944
- Title: coVariance Neural Networks
- Title(参考訳): 共分散ニューラルネットワーク
- Authors: Saurabh Sihag, Gonzalo Mateos, Corey McMillan, Alejandro Ribeiro
- Abstract要約: グラフニューラルネットワーク(GNN)は、グラフ構造化データ内の相互関係を利用して学習する効果的なフレームワークである。
我々は、サンプル共分散行列をグラフとして扱う、共分散ニューラルネットワーク(VNN)と呼ばれるGNNアーキテクチャを提案する。
VNN の性能は PCA ベースの統計手法よりも安定していることを示す。
- 参考スコア(独自算出の注目度): 119.45320143101381
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Graph neural networks (GNN) are an effective framework that exploit
inter-relationships within graph-structured data for learning. Principal
component analysis (PCA) involves the projection of data on the eigenspace of
the covariance matrix and draws similarities with the graph convolutional
filters in GNNs. Motivated by this observation, we propose a GNN architecture,
called coVariance neural network (VNN), that operates on sample covariance
matrices as graphs. We theoretically establish the stability of VNNs to
perturbations in the covariance matrix, thus, implying an advantage over
standard PCA-based data analysis approaches that are prone to instability due
to principal components associated with close eigenvalues. Our experiments on
real-world datasets validate our theoretical results and show that VNN
performance is indeed more stable than PCA-based statistical approaches.
Moreover, our experiments on multi-resolution datasets also demonstrate that
VNNs are amenable to transferability of performance over covariance matrices of
different dimensions; a feature that is infeasible for PCA-based approaches.
- Abstract(参考訳): グラフニューラルネットワーク(GNN)は、グラフ構造化データ内の相互関係を利用して学習する効果的なフレームワークである。
主成分分析(PCA)は共分散行列の固有空間上のデータの投影を伴い、GNNにおけるグラフ畳み込みフィルタと類似性を引き出す。
この観測により,サンプル共分散行列をグラフとして扱う,共分散ニューラルネットワーク(VNN)と呼ばれるGNNアーキテクチャを提案する。
共分散行列の摂動に対するVNNの安定性を理論的に確立し, 近接固有値に付随する主成分により不安定となる標準PCAに基づくデータ解析手法に対する優位性を示唆する。
実世界のデータセットを用いた実験では,PCAに基づく統計的手法よりも,VNNの性能が安定であることが確認された。
さらに,マルチレゾリューションデータセットを用いた実験により,vnnは,異なる次元の共分散行列による性能の伝達性に適していることが証明された。
関連論文リスト
- Sparse Covariance Neural Networks [15.616852692528594]
スパース共分散ニューラルネットワーク(S-VNN)は,名目VNNよりも安定であることを示す。
本稿では, S-VNNのタスク性能, 安定性, 計算効率を, 名目VNNと比較して改善したことを示す。
論文 参考訳(メタデータ) (2024-10-02T15:37:12Z) - Spatiotemporal Covariance Neural Networks [10.855602842179621]
本稿では,時系列のサンプル共分散行列を用いた関係学習モデルを導入し,データのモデル化に共同時間畳み込みを利用する。
我々は,STVNNが安定であり,時間的PCAに基づく手法よりも改善されていることを証明した。
論文 参考訳(メタデータ) (2024-09-16T08:05:58Z) - A Metadata-Driven Approach to Understand Graph Neural Networks [17.240017543449735]
グラフデータ特性に対するGNNの感度を解析するための$textitmetadata-driven$アプローチを提案する。
よりバランスの取れた次数分布を持つデータセットは,ノード表現の線形分離性の向上を図っている。
論文 参考訳(メタデータ) (2023-10-30T04:25:02Z) - Neural Tangent Kernels Motivate Graph Neural Networks with
Cross-Covariance Graphs [94.44374472696272]
グラフニューラルネットワーク(GNN)の文脈におけるNTKとアライメントについて検討する。
その結果、2層GNNのアライメントの最適性に関する理論的保証が確立された。
これらの保証は、入力と出力データの相互共分散の関数であるグラフシフト演算子によって特徴づけられる。
論文 参考訳(メタデータ) (2023-10-16T19:54:21Z) - Transferability of coVariance Neural Networks and Application to
Interpretable Brain Age Prediction using Anatomical Features [119.45320143101381]
グラフ畳み込みネットワーク(GCN)は、トポロジー駆動のグラフ畳み込み演算を利用して、推論タスクのためにグラフをまたいだ情報を結合する。
我々は、共分散行列をグラフとして、共分散ニューラルネットワーク(VNN)の形でGCNを研究した。
VNNは、GCNからスケールフリーなデータ処理アーキテクチャを継承し、ここでは、共分散行列が極限オブジェクトに収束するデータセットに対して、VNNが性能の転送可能性を示すことを示す。
論文 参考訳(メタデータ) (2023-05-02T22:15:54Z) - Batch-Ensemble Stochastic Neural Networks for Out-of-Distribution
Detection [55.028065567756066]
Out-of-Distribution(OOD)検出は、機械学習モデルを現実世界のアプリケーションにデプロイすることの重要性から、マシンラーニングコミュニティから注目を集めている。
本稿では,特徴量の分布をモデル化した不確実な定量化手法を提案する。
バッチアンサンブルニューラルネットワーク(BE-SNN)の構築と機能崩壊問題の克服を目的として,効率的なアンサンブル機構,すなわちバッチアンサンブルを組み込んだ。
We show that BE-SNNs yield superior performance on the Two-Moons dataset, the FashionMNIST vs MNIST dataset, FashionM。
論文 参考訳(メタデータ) (2022-06-26T16:00:22Z) - Interpolation-based Correlation Reduction Network for Semi-Supervised
Graph Learning [49.94816548023729]
補間型相関低減ネットワーク(ICRN)と呼ばれる新しいグラフコントラスト学習手法を提案する。
提案手法では,決定境界のマージンを大きくすることで,潜在特徴の識別能力を向上させる。
この2つの設定を組み合わせることで、豊富なラベル付きノードと稀に価値あるラベル付きノードから豊富な監視情報を抽出し、離散表現学習を行う。
論文 参考訳(メタデータ) (2022-06-06T14:26:34Z) - A Coupled CP Decomposition for Principal Components Analysis of
Symmetric Networks [11.988825533369686]
シーケンスネットワークデータのための主成分分析(PCA)フレームワークを提案する。
提案した「結合CP」分解の効率的な計算アルゴリズムを導出する。
本稿は、シミュレーションデータと、政治科学・金融経済学の事例における提案の有効性を実証する。
論文 参考訳(メタデータ) (2022-02-09T20:52:19Z) - Stability of Neural Networks on Manifolds to Relative Perturbations [118.84154142918214]
グラフニューラルネットワーク(GNN)は多くの実践シナリオにおいて素晴らしいパフォーマンスを示している。
GNNは大規模グラフ上でうまくスケールすることができるが、これは既存の安定性がノード数とともに増加するという事実に矛盾する。
論文 参考訳(メタデータ) (2021-10-10T04:37:19Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。