論文の概要: Measuring Over-smoothing beyond Dirichlet energy
- arxiv url: http://arxiv.org/abs/2512.06782v1
- Date: Sun, 07 Dec 2025 10:53:22 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-12-09 22:03:54.526303
- Title: Measuring Over-smoothing beyond Dirichlet energy
- Title(参考訳): ディリクレエネルギーを超える過平滑化の測定
- Authors: Weiqi Guan, Zihao Shi,
- Abstract要約: 本稿では,高次特徴関数のエネルギーに基づくノード類似度尺度のファミリーを提案する。
提案手法を用いて評価すると,注目に基づくグラフニューラルネットワーク(GNN)が過度なスムース化に悩まされることが分かる。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: While Dirichlet energy serves as a prevalent metric for quantifying over-smoothing, it is inherently restricted to capturing first-order feature derivatives. To address this limitation, we propose a generalized family of node similarity measures based on the energy of higher-order feature derivatives. Through a rigorous theoretical analysis of the relationships among these measures, we establish the decay rates of Dirichlet energy under both continuous heat diffusion and discrete aggregation operators. Furthermore, our analysis reveals an intrinsic connection between the over-smoothing decay rate and the spectral gap of the graph Laplacian. Finally, empirical results demonstrate that attention-based Graph Neural Networks (GNNs) suffer from over-smoothing when evaluated under these proposed metrics.
- Abstract(参考訳): ディリクレエネルギーは過平滑化を定量化するための一般的な計量として機能するが、本質的には一階特徴微分を捉えることに制限される。
この制限に対処するため,高次特徴量のエネルギーに基づくノード類似度尺度の一般化族を提案する。
これらの測度間の関係の厳密な理論的解析を通じて、連続的な熱拡散と離散的な集合作用素の両方の下でディリクレエネルギーの崩壊速度を確立する。
さらに, この分析により, オーバー・スムージング崩壊率とグラフラプラシアンのスペクトルギャップとの本質的な関係が明らかとなった。
最後に、これらの指標に基づいて評価すると、注意に基づくグラフニューラルネットワーク(GNN)が過度なスムーシングに悩まされることが実証された。
関連論文リスト
- Rethinking Oversmoothing in Graph Neural Networks: A Rank-Based Perspective [5.482832675034467]
ランクベースのメトリクスが常に過剰なスムースを捉えるのに対して、エネルギーベースのメトリクスは失敗することが多いことを示す。
特に,エネルギー指標が変化しないシナリオにおいても,ランクの大幅な低下が性能劣化と密接に一致していることが明らかになった。
論文 参考訳(メタデータ) (2025-02-07T00:55:05Z) - Quantum optical scattering by macroscopic lossy objects: A general approach [55.2480439325792]
真空中に置かれた損失の大きいマクロな物体によって量子光の散乱を記述するための一般的な手法を開発する。
入力出力関係を利用してフィールドの出力状態を入力1に接続する。
古典的な透過・吸収ダイアディクスがS-ポラリトンからS-ポラリトンへの遷移に与える影響を解析した。
論文 参考訳(メタデータ) (2024-11-27T17:44:29Z) - Bridging Smoothness and Approximation: Theoretical Insights into Over-Smoothing in Graph Neural Networks [12.001676605529626]
グラフ上で定義される関数の近似理論について検討する。
グラフ畳み込みネットワーク(GCN)を用いて,対象関数に対する近似の下位境界を評価する枠組みを確立する。
出力の高周波エネルギーがGCNの過度な平滑化の指標である崩壊する様子を示す。
論文 参考訳(メタデータ) (2024-07-01T13:35:53Z) - Nonparametric Partial Disentanglement via Mechanism Sparsity: Sparse
Actions, Interventions and Sparse Temporal Dependencies [58.179981892921056]
この研究は、メカニズムのスパーシティ正則化(英語版)と呼ばれる、アンタングルメントの新たな原理を導入する。
本稿では,潜在要因を同時に学習することで,絡み合いを誘発する表現学習手法を提案する。
学習した因果グラフをスパースに規則化することにより、潜伏因子を復元できることを示す。
論文 参考訳(メタデータ) (2024-01-10T02:38:21Z) - Boundary theories of critical matchgate tensor networks [59.433172590351234]
AdS/CFT対応の重要な側面は、双曲格子上のテンソルネットワークモデルの観点から捉えることができる。
マッチゲート制約を満たすテンソルに対しては、これらは以前、乱れた境界状態を生成することが示されている。
これらのハミルトニアンは、解析的な玩具モデルによって捉えられたマルチスケールの準周期対称性を示す。
論文 参考訳(メタデータ) (2021-10-06T18:00:03Z) - Out-of-time-order correlations and the fine structure of eigenstate
thermalisation [58.720142291102135]
量子情報力学と熱化を特徴付けるツールとして、OTOC(Out-of-time-orderor)が確立されている。
我々は、OTOCが、ETH(Eigenstate Thermalisation hypothesis)の詳細な詳細を調査するための、本当に正確なツールであることを明確に示している。
無限温度状態における局所作用素の和からなる可観測物の一般クラスに対して、$omega_textrmGOE$の有限サイズスケーリングを推定する。
論文 参考訳(メタデータ) (2021-03-01T17:51:46Z) - Localisation in quasiperiodic chains: a theory based on convergence of
local propagators [68.8204255655161]
局所プロパゲータの収束に基づく準周期鎖に最も近いホッピングを持つ局所化の理論を提示する。
これらの連続分数の収束、局所化、あるいはその欠如を分析することは可能であり、それによって臨界点とモビリティエッジが帰結する。
結果は、振る舞いの範囲をカバーする3つの準周期モデルの理論を分析することで実証される。
論文 参考訳(メタデータ) (2021-02-18T16:19:52Z) - A Dynamical Central Limit Theorem for Shallow Neural Networks [48.66103132697071]
平均極限の周りのゆらぎは、トレーニングを通して平均正方形に有界であることを証明する。
平均場ダイナミクスがトレーニングデータを補間する尺度に収束すると、最終的にCLTスケーリングにおいて偏差が消えることを示す。
論文 参考訳(メタデータ) (2020-08-21T18:00:50Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。