論文の概要: Permutation Invariant Representations with Applications to Graph Deep
Learning
- arxiv url: http://arxiv.org/abs/2203.07546v1
- Date: Mon, 14 Mar 2022 23:13:59 GMT
- ステータス: 処理完了
- システム内更新日: 2022-03-17 09:57:07.327799
- Title: Permutation Invariant Representations with Applications to Graph Deep
Learning
- Title(参考訳): 置換不変表現とグラフ深層学習への応用
- Authors: Radu Balan, Naveed Haghani, Maneesh Singh
- Abstract要約: 本稿では、任意の任意の列列置換が与えられた行列によって生成される商空間のユークリッド埋め込みについて述べる。
ほぼ至るところで、最小冗長性と計算コストの低いインジェクティブスキームを実装できる。
- 参考スコア(独自算出の注目度): 8.403227482145297
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: This paper presents primarily two Euclidean embeddings of the quotient space
generated by matrices that are identified modulo arbitrary row permutations.
The original application is in deep learning on graphs where the learning task
is invariant to node relabeling. Two embedding schemes are introduced, one
based on sorting and the other based on algebras of multivariate polynomials.
While both embeddings exhibit a computational complexity exponential in problem
size, the sorting based embedding is globally bi-Lipschitz and admits a low
dimensional target space. Additionally, an almost everywhere injective scheme
can be implemented with minimal redundancy and low computational cost. In turn,
this proves that almost any classifier can be implemented with an arbitrary
small loss of performance. Numerical experiments are carried out on two data
sets, a chemical compound data set (QM9) and a proteins data set (PROTEINS).
- Abstract(参考訳): 本稿では, 行列によって生成される商空間の2つのユークリッド埋め込みについて述べる。
元々のアプリケーションは、学習タスクがノードのrelabelingに不変であるグラフのディープラーニングである。
2つの埋め込みスキームが導入され、1つはソートに基づくもので、もう1つは多変量多項式の代数に基づくものである。
どちらの埋め込みも問題の大きさが指数関数的に計算複雑性を示すが、ソートベースの埋め込みは世界規模で双Lipschitzであり、低次元のターゲット空間を持つ。
さらに、ほとんどどこでも注入スキームを最小限の冗長性と低い計算コストで実装できる。
結果として、ほとんどのどの分類器でも、任意の性能の損失で実装できることが証明される。
化学化合物データセット(qm9)とタンパク質データセット(proteins)の2つのデータセットについて数値実験を行った。
関連論文リスト
- From Exponential to Polynomial Complexity: Efficient Permutation Counting with Subword Constraints [0.0]
置換による異なる置換を数えることは、特に複数のサブワードを含む場合、分析における長年の課題である。
本稿では,置換による異なる置換を計算するための閉形式式を示す新しいフレームワークを提案する。
次に、新たな式を開発することにより、基本公式を複数のサブワードを扱うように拡張する。
論文 参考訳(メタデータ) (2024-11-23T19:52:11Z) - Computational-Statistical Gaps in Gaussian Single-Index Models [77.1473134227844]
単次元モデル(Single-Index Models)は、植木構造における高次元回帰問題である。
我々は,統計的クエリ (SQ) と低遅延多項式 (LDP) フレームワークの両方において,計算効率のよいアルゴリズムが必ずしも$Omega(dkstar/2)$サンプルを必要とすることを示した。
論文 参考訳(メタデータ) (2024-03-08T18:50:19Z) - Covering Number of Real Algebraic Varieties and Beyond: Improved Bounds and Applications [8.438718130535296]
ユークリッド空間における集合の被覆数について上限を証明する。
ここでは、イムディン・コントによる最もよく知られた一般境界が改善されることが示される。
本稿では,3つの計算応用における結果のパワーについて説明する。
論文 参考訳(メタデータ) (2023-11-09T03:06:59Z) - Accelerated Discovery of Machine-Learned Symmetries: Deriving the
Exceptional Lie Groups G2, F4 and E6 [55.41644538483948]
このレターでは、対称性変換の発見を著しく高速化する2つの改良されたアルゴリズムを紹介している。
例外的リー群の複雑性を考えると,この機械学習手法は完全に汎用的であり,多種多様なラベル付きデータセットに適用可能であることを示す。
論文 参考訳(メタデータ) (2023-07-10T20:25:44Z) - Discrete Graph Auto-Encoder [52.50288418639075]
離散グラフオートエンコーダ(DGAE)という新しいフレームワークを導入する。
まず、置換同変オートエンコーダを用いてグラフを離散潜在ノード表現の集合に変換する。
2番目のステップでは、離散潜在表現の集合をソートし、特別に設計された自己回帰モデルを用いてそれらの分布を学習する。
論文 参考訳(メタデータ) (2023-06-13T12:40:39Z) - One-step Bipartite Graph Cut: A Normalized Formulation and Its
Application to Scalable Subspace Clustering [56.81492360414741]
両部グラフの1ステップ正規化カットを、特に線形時間複雑性で実施する方法を示す。
本稿では、まず、正規化制約付き一段階二分グラフカット基準を特徴付けるとともに、そのトレース問題に対する等価性を理論的に証明する。
このカット基準を、適応アンカー学習、二部グラフ学習、一段階正規化二部グラフ分割を同時にモデル化するスケーラブルなサブスペースクラスタリングアプローチに拡張する。
論文 参考訳(メタデータ) (2023-05-12T11:27:20Z) - Fast computation of permutation equivariant layers with the partition
algebra [0.0]
入力の置換に不変あるいは不変の線形ニューラルネットワーク層は、現代のディープラーニングアーキテクチャのコアビルディングブロックを形成する。
例えば、DeepSetのレイヤや、トランスフォーマーの注目ブロックやグラフニューラルネットワークで発生する線形レイヤなどがある。
論文 参考訳(メタデータ) (2023-03-10T21:13:12Z) - Combining Varied Learners for Binary Classification using Stacked
Generalization [3.1871776847712523]
本稿では,高次元多嚢胞性卵巣症候群データセットを用いたスタックド一般化を用いたバイナリ分類を行う。
この論文では、受信器動作特性曲線で発見された微妙なトランスグレッションが誤りであることが証明されたことを指摘している。
論文 参考訳(メタデータ) (2022-02-17T21:47:52Z) - The Separation Capacity of Random Neural Networks [78.25060223808936]
標準ガウス重みと一様分布バイアスを持つ十分に大きな2層ReLUネットワークは、この問題を高い確率で解くことができることを示す。
我々は、相互複雑性という新しい概念の観点から、データの関連構造を定量化する。
論文 参考訳(メタデータ) (2021-07-31T10:25:26Z) - A Practical Method for Constructing Equivariant Multilayer Perceptrons
for Arbitrary Matrix Groups [115.58550697886987]
行列群の同変層を解くための完全一般的なアルゴリズムを提供する。
他作品からのソリューションを特殊ケースとして回収するだけでなく、これまで取り組んだことのない複数のグループと等価な多層パーセプトロンを構築します。
提案手法は, 粒子物理学および力学系への応用により, 非同変基底線より優れる。
論文 参考訳(メタデータ) (2021-04-19T17:21:54Z) - Solution Path Algorithm for Twin Multi-class Support Vector Machine [6.97711662470035]
本論文は, ツインマルチクラスサポートベクトルマシンの高速正規化パラメータチューニングアルゴリズムについて述べる。
新たなサンプルデータセット分割法を採用し,ラグランジアン乗算器は分数線形であることが証明された。
提案手法は,グリッド探索手法の計算コストを指数レベルから定数レベルに削減し,優れた分類性能を実現する。
論文 参考訳(メタデータ) (2020-05-30T14:05:46Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。