論文の概要: Analytic-Walk Rotary Positional Encodings for Graphs
- arxiv url: http://arxiv.org/abs/2609.32178v1
- Date: Sat, 26 Sep 2026 03:00:22 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-07 19:14:01.944633
- Title: Analytic-Walk Rotary Positional Encodings for Graphs
- Title(参考訳): グラフのための解析-ウォークロータリー位置符号化
- Abstract要約: 回転位置符号化は相対的な位置に対して注意を向けるが、グラフに拡張するには、グラフ構造がどのように回転に入るかを選択する必要がある。
従来の作業では、各ノードにスペクトル座標からの回転を割り当てていたため、2つのノード間の回転係数はエンドポイントに依存しており、それらを接続するルートを区別することができない。
我々はAW-RoPEを導入し、エッジに回転を配置し、すべてのウォークに移動した特徴を合計するので、異なるルートに沿ったコントリビューションが強化またはキャンセルできる。
- 参考スコア(独自算出の注目度): 49.85093436361195
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Rotary position encodings make attention sensitive to relative position, but extending them to graphs requires choosing how graph structure enters the rotation. Previous works assign each node a rotation from spectral coordinates, so the rotary factor between two nodes depends only on their endpoints and cannot distinguish the routes connecting them. We introduce \textit{Analytic-Walk Rotary Positional Encodings} (AW-RoPE), which place the rotations on edges and sum the transported features over all walks, so contributions along different routes can reinforce or cancel. An exact variant evaluates the complete sum by a differentiable linear solve, and a sparse variant truncates it at a finite depth. We prove forward and parameter-derivative truncation bounds at fixed inputs and parameters. Both variants act on projected queries and keys, and the sparse recurrence also augments message-passing networks. Across five synthetic tasks both variants reduce nRMSE by $15$--$58\%$ relative to the strongest baseline, and on real superpixel, peptide and OGB benchmarks the sparse recurrence attains the best mean on every dataset with Performer kernels and on twelve of thirteen datasets with GIN. Analysis shows that AW-RoPE can distinguish routes whose only cue is how two endpoints are connected, while node-wise rotary encodings cannot.
- Abstract(参考訳): 回転位置符号化は相対的な位置に対して注意を向けるが、グラフに拡張するには、グラフ構造がどのように回転に入るかを選択する必要がある。
従来の作業では、各ノードにスペクトル座標からの回転を割り当てていたため、2つのノード間の回転係数はエンドポイントにのみ依存し、それらを接続するルートを区別することができない。
AW-RoPE (textit{Analytic-Walk Rotary Positional Encodings}) を導入し, エッジ上に回転を配置し, 移動した特徴を全歩行で和らげることで, 異なる経路に沿ったコントリビューションの強化やキャンセルが可能となる。
正確な変種は、完備和を微分可能な線形解で評価し、スパース変種はそれを有限深さで切り離す。
我々は、固定された入力とパラメータで前方およびパラメータ微分のトランケーション境界を証明した。
どちらの変種もプロジェクションされたクエリとキーに作用し、スパース繰り返しはメッセージパッシングネットワークも強化する。
5つの合成タスクによって、NRMSEは最強のベースラインに対して$15$--58\%の値で減少し、実際のスーパーピクセルでは、ペプチドとOGBのベンチマークによって、Performerカーネルを持つデータセットと13のデータセットのうち12つにおいて、スパースリカレンスが最高の平均に達した。
解析によると、AW-RoPEは2つのエンドポイントが接続される経路のみを区別できるが、ノードワイドなロータリエンコーディングはできない。
関連論文リスト
- Variational Joint Magnetometry and Gradiometry on Dipolar Spin Chains [14.720429715932829]
本稿では,det(F)を目的とし,ハードウェアを駆動する層状双極回路をアンザッツとする変分フレームワークを提案する。
両方のエンコーディングジェネレータは計算ベースで対角的であり、量子フィッシャー情報ベンチマークの探索を確率-複雑な最適化に還元する。
論文 参考訳(メタデータ) (2026-05-05T15:59:22Z) - R2G: A Multi-View Circuit Graph Benchmark Suite from RTL to GDSII [14.790942679912595]
R2Gは5つのステージ認識ビューを情報同値で標準化するマルチビューサーキットグラフベンチマークスイートである。
R2Gは、合成、配置、ルーティングステージにまたがるエンドツーエンドのDEF-to-graphパイプラインを提供する。
論文 参考訳(メタデータ) (2026-04-09T22:59:27Z) - Wavelet-Induced Rotary Encodings: RoPE Meets Graphs [51.129737804765334]
WIREはRotary Position sをグラフ構造化データに拡張する。
我々は、WIRE が RoPE よりも一般的であることを示し、グリッドグラフの特別な場合において後者を復元する。
WIREは、様々な合成および実世界のアルゴリズムタスクでテストする。
論文 参考訳(メタデータ) (2025-09-26T12:20:18Z) - Lightweight yet Efficient: An External Attentive Graph Convolutional Network with Positional Prompts for Sequential Recommendation [8.49353541052153]
本稿では,逐次的推薦,すなわちEA-GPSのための位置推定プロンプトを備えた外部注意グラフ畳み込みネットワークを提案する。
提案したEA-GPSは最先端の手法よりも優れていることを示す。
論文 参考訳(メタデータ) (2025-02-21T09:34:31Z) - Rotation-Invariant Transformer for Point Cloud Matching [42.5714375149213]
我々は,回転不変変換器であるRoITrを導入し,点クラウドマッチングタスクにおけるポーズ変動に対処する。
本稿では,自己認識機構によって学習した,回転不変なクロスフレーム空間認識を備えたグローバルトランスフォーマーを提案する。
RoITrは、Inlier RatioとRegistration Recallの点で、既存のメソッドを少なくとも13と5のパーセンテージで上回っている。
論文 参考訳(メタデータ) (2023-03-14T20:55:27Z) - CRIN: Rotation-Invariant Point Cloud Analysis and Rotation Estimation
via Centrifugal Reference Frame [60.24797081117877]
CRIN,すなわち遠心回転不変ネットワークを提案する。
CRINは点の座標を直接入力として取り、局所点を回転不変表現に変換する。
点に基づく3次元回転の連続分布を導入する。
論文 参考訳(メタデータ) (2023-03-06T13:14:10Z) - Quaternion Equivariant Capsule Networks for 3D Point Clouds [58.566467950463306]
本稿では,3次元回転と翻訳に同値な点雲を処理するための3次元カプセルモジュールを提案する。
カプセル間の動的ルーティングをよく知られたWeiszfeldアルゴリズムに接続する。
オペレーターに基づいて、ポーズから幾何学をアンタングルするカプセルネットワークを構築します。
論文 参考訳(メタデータ) (2019-12-27T13:51:17Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。