論文の概要: Get a GRIP, this will be a long TRIP: A Quantifiable Long-Range Framework for Verifying Over-squashing
- arxiv url: http://arxiv.org/abs/2610.03556v1
- Date: Fri, 02 Oct 2026 16:37:19 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-06 00:14:30.479253
- Title: Get a GRIP, this will be a long TRIP: A Quantifiable Long-Range Framework for Verifying Over-squashing
- Title(参考訳): GRIPを手に入れると、これは長いTRIPになる:オーバースカッシングを検証するための定量ロングレンジフレームワーク
- Abstract要約: デファクト標準であるLong Range Graph Benchmarkは、チューニングされた短距離モデルによって飽和することが繰り返し示されている。
任意のグラフに長距離性の原則付き証明がない。
予測可能性,太さ,厳密な$k$-Range,トポロジー不変性の4つの公理を導入する。
- 参考スコア(独自算出の注目度): 29.875227793409064
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: Empirical claims about the connection between over-squashing and long-range interactions in GNNs, can only be trusted if the benchmarks used to validate them genuinely require long-range interactions. The de-facto standard, the Long Range Graph Benchmark, has been repeatedly shown to be saturated by tuned short-range models, with existing synthetic alternatives being tied to specific topologies. As such, there is a lack of principled certificate of long-rangedness on arbitrary graphs. This state reflects the absence of a precise characterization of long-ranged benchmarks. We address this fundamental gap by introducing four verifiable axioms: Predictability, Tightness, Strictly $k$-Range, and Topology-Invariance, that any task claiming to test $k$-hop interactions must satisfy. We formally prove that violating any one of them admits failure modes that undermine conclusions drawn from the task. Based on these axioms, we introduce TRIP (Truly Ranged Interactions Problem) and its generalisation GRIP (Generally Ranged Interactions Problem), constructive procedures that turn any graph into a provably long-ranged task by drawing features from stable distributions. Moreover, by construction, GRIP admits a closed-form, per-range Maximum-Likelihood oracle that yields the first a priori per-range lower bound on test error available on any benchmark. Using our framework, we: (i) audit 4 common long-range benchmarks and identify their failures modes with respect to our axioms; (ii) on TRIP-instantiated topologies, we find a popular notion of curvature is uncorrelated with GNN performance, supporting topological-vs-computational bottleneck distinction; and (iii) we show that a novel benchmark's over-squashing measures factors beyond pure long-rangedness. Code to use the framework and reproduce experiments is released https://github.com/ferranhernandezc/graph-grip.
- Abstract(参考訳): GNNにおけるオーバースカッシングと長距離インタラクションの関連に関する実証的な主張は、それらを検証するために使用されるベンチマークが実際に長距離インタラクションを必要とする場合のみ信頼される。
デファクト標準であるLong Range Graph Benchmarkは、チューニングされたショートレンジモデルによって飽和することが繰り返し示され、既存の合成代替品は特定のトポロジーに結びついている。
そのため、任意のグラフ上での長距離性に関する原則的な証明が欠如している。
この状態は、長距離ベンチマークの正確なキャラクタリゼーションがないことを反映している。
予測可能性、太さ、厳密な$k$-Range、およびトポロジ-不変性の4つの検証可能な公理を導入することで、この根本的なギャップに対処する。
いずれかのタスクに違反することは、タスクから引き出された結論を損なうような障害モードを認めることを正式に証明します。
これらの公理に基づいて、安定分布から特徴を引き出すことにより、グラフを証明可能な長距離タスクに変換する構成手順であるTRIP(Truly Ranged Interactions Problem)とその一般化GRIP(Generally Ranged Interactions Problem)を導入する。
さらに、GRIPは構成によって、任意のベンチマークで利用可能なテストエラーに対して、最初の1つの事前境界を下限とする、クローズド形式、範囲ごとの最大様相のオラクルを許容する。
私たちのフレームワークを使います。
i) 一般的な4つの長距離ベンチマークを監査し、我々の公理に関する障害モードを特定します。
(II) TRIP-Instantiated Topology では、曲率の一般的な概念はGNNのパフォーマンスとは無関係であり、トポロジカル-vs-計算的ボトルネックの区別をサポートする。
(3)新しいベンチマークの過度な測定基準は、純粋な長距離性を超えていることが示される。
フレームワークの使用と実験の再現のためのコードはhttps://github.com/ferranhernandezc/graph-grip.orgで公開されている。
関連論文リスト
- High-Probability Convergence of SGD via Batched Updates [4.862625283098196]
Batched SGDは、オンラインエポックを最適化に反復するシンプルなバリエーションである。
我々の主な貢献は、このメカニズムが驚くほど単純な高確率解析を可能にすることを示している。
論文 参考訳(メタデータ) (2026-09-11T12:17:18Z) - The Laws of Context Allocation: Causal Measurement and Closed-Loop Orchestration in Generative Search [19.846305722187328]
Retrieval-Augmented Generation (RAG)は、多様なポートフォリオ生成にシフトする。
これは2つの重要なボトルネック、すなわち証拠利用率の欠陥測定と、最適条件下予算配分によって悪影響を受けている。
本稿では,遺伝子依存を正確に分離する因果排除プローブを提案する。
モノリシック・コンテキスト・ワイドニング(モノリシック・コンテキスト・ワイドニング)の一般的な戦略は、関連性の崩壊によって罰せられるアーキテクチャ・トラップであることを示す。
論文 参考訳(メタデータ) (2026-08-24T13:44:11Z) - Tailoring Strictly Proper Scoring Rules for Downstream Tasks: An Application to Causal Inference [48.78219918881965]
本稿では,ダウンストリーム誤差メトリックの局所曲率をマッチングすることにより,タスク固有の厳密なスコアリングルールを導出するフレームワークを提案する。
これを平均処理効果 (ATE) 推定に適用し, 閉形式損失と対応する正準確率写像を導出する。
論文 参考訳(メタデータ) (2026-06-02T08:41:25Z) - Why LLMs Fail at Causal Discovery and How Interventional Agents Escape [2.7976995580303305]
因果発見は科学的な推論の基盤であるが、大きな言語モデルが確実にそれを実行することができるかどうかについては未解決のままである。
最近のベンチマークでは、単純な因果グラフ上で微調整されたモデルでさえ、複雑さが増大するにつれて劣化するが、なぜ失敗するのかは定まっていない。
教師付き微調整, 直接選好最適化, コンテキスト内学習はすべて, 類似した観測データを生成する因果グラフを区別できない予測子を生成する。
論文 参考訳(メタデータ) (2026-05-26T18:37:03Z) - No More Maybe-Arrows: Resolving Causal Uncertainty by Breaking Symmetries [9.341830361844337]
因果関係を尊重しながらPAGをDAGに変換するための新しい改良フレームワークCausalSAGEを提案する。
得られたDAGは,根底にある因果関係を保ちつつ,効率よく得られることを示す。
論文 参考訳(メタデータ) (2026-03-01T11:21:12Z) - HELP: HyperNode Expansion and Logical Path-Guided Evidence Localization for Accurate and Efficient GraphRAG [53.30561659838455]
大きな言語モデル(LLM)は、しばしば固有の知識境界と幻覚に苦しむ。
Retrieval-Augmented Generation (RAG) は、マルチホップ推論に不可欠な構造的相互依存性をしばしば見落としている。
ヘルプは、複数の単純でマルチホップなQAベンチマークで競合性能を達成し、グラフベースのRAGベースラインよりも28.8$times$のスピードアップを実現している。
論文 参考訳(メタデータ) (2026-02-24T14:05:29Z) - Less Greedy Equivalence Search [52.818153111470394]
Greedy Equivalence Search (GES)は、観測データから因果探索を行うためのスコアベースのアルゴリズムである。
我々はGESの変種であるLose Greedy Equivalence Search (LGES)を開発した。
論文 参考訳(メタデータ) (2025-06-27T15:39:48Z) - Exploring Neural Granger Causality with xLSTMs: Unveiling Temporal Dependencies in Complex Data [38.14301445683068]
時系列における因果関係は、特に非線形依存の存在において決定することが困難である。
本稿では,変数間の長距離関係を捉えるために,Granger causal xLSTM(GC-xLSTM)を提案する。
本研究は,GC-xLSTMの総合的な有効性を示す6つの多種多様なデータセットについて実験的に評価した。
論文 参考訳(メタデータ) (2025-02-14T08:07:03Z) - From Gradient Flow on Population Loss to Learning with Stochastic
Gradient Descent [50.4531316289086]
SGD(Gradient Descent)は、大規模非ルートモデルの学習方法である。
集団損失のGFが収束すると仮定して、総合的な条件 SGD が収束する。
我々は、凸損失のような古典的な設定だけでなく、Retrieval Matrix sq-rootのようなより複雑な問題に対してもGD/SGDを統一的に解析する。
論文 参考訳(メタデータ) (2022-10-13T03:55:04Z) - Causal Expectation-Maximisation [70.45873402967297]
ポリツリーグラフを特徴とするモデルにおいても因果推論はNPハードであることを示す。
我々は因果EMアルゴリズムを導入し、分類的表現変数のデータから潜伏変数の不確かさを再構築する。
我々は、反事実境界が構造方程式の知識なしにしばしば計算できるというトレンドのアイデアには、目立たずの制限があるように思える。
論文 参考訳(メタデータ) (2020-11-04T10:25:13Z) - Lower bounds in multiple testing: A framework based on derandomized
proxies [107.69746750639584]
本稿では, 各種コンクリートモデルへの適用例を示す, デランドマイズに基づく分析戦略を提案する。
これらの下界のいくつかを数値シミュレーションし、Benjamini-Hochberg (BH) アルゴリズムの実際の性能と密接な関係を示す。
論文 参考訳(メタデータ) (2020-05-07T19:59:51Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。