論文の概要: What Converges in the Platonic Representation Hypothesis? Structure over Geometry
- arxiv url: http://arxiv.org/abs/2609.27252v1
- Date: Wed, 23 Sep 2026 02:38:04 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-09-25 00:05:17.84494
- Title: What Converges in the Platonic Representation Hypothesis? Structure over Geometry
- Title(参考訳): プラトン表現仮説の収束 : 幾何学上の構造
- Abstract要約: プラトン表現仮説(英: Platonic Representation hypothesis)は、ますます有能なモデルが共有表現に収束することを示唆する。
最近の研究は、この主張を地域関係の共有に絞っている。
その結果, 前回の地域・地域間比較では, 構造スケール(局所対グローバル)が比較対象と一致していることが判明した。
- 参考スコア(独自算出の注目度): 12.074231630572067
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: The Platonic Representation Hypothesis suggests that increasingly capable models converge toward shared representations. Recent work narrows this claim to shared local neighborhood relationships, finding that capacity-dependent trends in several global similarity measures largely disappear after calibration. We challenge this interpretation by showing that prior local-global comparisons confound structural scale (local versus global) with what is compared: relational structure, defined by which samples are related, versus metric geometry, characterized by quantitative relations such as distances, similarities, or correlations. To disentangle these factors, we construct a controlled $2\times2$ framework that evaluates both relational structure and metric geometry at local and global scales. We introduce $H_0$ skeleton overlap as a global counterpart to mutual $k$-nearest neighbors, together with matched distance-aware variants. Across vision-language models, relational structure exhibits robust representational convergence at both scales after calibration, whereas increasingly stringent distance agreement substantially weakens alignment and progressively flattens the capacity-dependent trend. We further extend the analysis beyond ambient Euclidean geometry by evaluating distance agreement under a Riemannian metric approximation and recover the same structure-geometry pattern. The pattern is also reproduced in video-text representations. Together, these results show that relational convergence extends beyond local neighborhoods to global spanning structure, whereas metric geometry exhibits substantially weaker convergence.
- Abstract(参考訳): プラトン表現仮説(Platonic Representation hypothesis)は、ますます有能なモデルが共有表現に収束することを示唆している。
近年の研究では、地域間の関係を共有するという主張が狭まり、キャリブレーション後に、いくつかのグローバルな類似性対策におけるキャパシティ依存の傾向が消えることが判明している。
この解釈は, 距離, 類似性, 相関関係などの量的関係を特徴とする, サンプルが関係する関係構造と, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離, 距離
これらの要因を解消するために、局所的および大域的スケールで関係構造と計量幾何学の両方を評価する制御された2\times2$フレームワークを構築した。
相互に$k$-nearest隣人に対するグローバルな対応として$H_0$スケルトンオーバーラップを導入する。
視覚言語モデル全体では、リレーショナル構造はキャリブレーション後の両スケールで堅牢な表現収束を示す一方、より厳密な距離合意はアライメントを著しく弱め、キャパシティ依存の傾向を徐々に平坦化させる。
さらに、リーマン計量近似の下で距離一致を評価することにより、周囲ユークリッド幾何学を超えて解析を拡張し、同じ構造幾何学パターンを復元する。
このパターンはビデオテキスト表現でも再現される。
これらの結果から、関係収束は局所的近傍を超えて大域的スパンニング構造にまで拡大するが、計量幾何学はより弱い収束を示す。
関連論文リスト
- Transformer Geometry Observatory TGO-III: Semantic Geometry Observatory [2.4900509453584156]
本研究は, TGO-III: Semantic Geometry Observatory を通じて, ViT-Small/16の層間で表現が進化するにつれて, 意味幾何学とクラス分離性について検討する。
セマンティックな組織の形成、機能進化、およびクラスワイドな表現幾何学をトレーニングを通して分析するために設計されたフレームワークである。
論文 参考訳(メタデータ) (2026-08-03T08:21:16Z) - Geometry of Semantic Space: Comparative Study of Discrete and Continuous Models [0.0]
教師付きベクトル埋め込みと、より直接的に意味関係を符号化する語彙共起グラフを比較する。
対照的に、グラフベースのモデルは、より明確で、より人間的に読みやすい意味の組織を明らかにする。
論文 参考訳(メタデータ) (2026-06-05T11:47:22Z) - LAST: Bridging Vision-Language and Action Manifolds via Gromov-Wasserstein Alignment [71.3712075841632]
LASTはアクション空間を再構築し、ビジョン・ランゲージ・アクション・モダリティとの局所的な距離互換性を確立する。
LASTは収束性と一般化性に優れたVLAモデルを可能にする。
論文 参考訳(メタデータ) (2026-05-27T03:48:10Z) - Beyond Point-Wise Matching: Structural Representation Alignment for Accelerating Diffusion Transformers [93.3976834364707]
本稿では,特徴写像のリレーショナル幾何における整合性を実現する構造的RePresentation AlignmentフレームワークであるsREPAを提案する。
モデルが事前訓練された特徴から全体的空間配置と構造的相関を内包するように促すことにより、sREPAはより高速でより安定した収束を達成する。
論文 参考訳(メタデータ) (2026-05-16T12:01:04Z) - NARA: Anchor-Conditioned Relation-Aware Contextualization of Heterogeneous Geoentities [10.545074153193701]
ベクトル空間の自己教師型フレームワークであるNARA(Neural Anchor-conditioned Relation-Aware representation learning)を提案する。
NARAは、統合されたフレームワーク内で意味論、幾何学、空間関係を共同でモデル化することで、文脈依存の表現を学ぶ。
論文 参考訳(メタデータ) (2026-05-12T15:37:10Z) - Revisiting the Platonic Representation Hypothesis: An Aristotelian View [3.647057737530591]
表現的類似度を測定するために使用される既存のメトリクスは、ネットワークスケールで構築されていることを示す。
本稿では,任意の表現類似度尺度を統計的保証付き校正スコアに変換する置換に基づくヌル校正フレームワークを提案する。
本稿では,アリストテレス表現仮説(Aristotelian Representation hypothesis)を提案する。
論文 参考訳(メタデータ) (2026-02-16T06:01:23Z) - Scale-Consistent State-Space Dynamics via Fractal of Stationary Transformations [9.983526161001997]
最近のディープラーニングモデルは、中間表現の妥当性に関する構造的な保証なしに、ますます深度に依存している。
我々は、状態空間モデルのスケール一貫性潜在力学の構造的要件を定式化することにより、この制限に対処する。
我々は予測されたスケール一貫性の挙動を実証的に検証し、適応効率がアライメントされた潜在幾何学から現れることを示す。
論文 参考訳(メタデータ) (2026-01-27T12:44:20Z) - Unifying Information-Theoretic and Pair-Counting Clustering Similarity [51.660331450043806]
クラスタリング類似度尺度は通常、ペアカウントと情報理論の2つの主要なファミリーに分けられる。
本稿では,2つの相補的な観点から,これらの家族を統一する分析枠組みを開発する。
論文 参考訳(メタデータ) (2025-11-04T21:13:32Z) - A Set-to-Set Distance Measure in Hyperbolic Space [50.134086375286074]
双曲空間における集合間の相似性を計算するための双曲的集合間距離測度を提案する。
位相的差を考慮すると、HS2SDは2つの双曲集合の間の関係をより微妙に理解する。
論文 参考訳(メタデータ) (2025-06-23T11:31:40Z) - HierRelTriple: Guiding Indoor Layout Generation with Hierarchical Relationship Triplet Losses [52.70183252341687]
本稿では,空間的関係学習に着目した階層型三重項に基づく屋内関係学習手法HierRelTripleを提案する。
階層型リレーショナル三重項モデリングフレームワークであるHierRelTripleを導入する。
非条件レイアウト合成、フロアプラン条件付きレイアウト生成、シーン再構成の実験により、HierRelは空間関係のメトリクスを15%以上改善することを示した。
論文 参考訳(メタデータ) (2025-03-26T07:31:52Z) - (Deep) Generative Geodesics [57.635187092922976]
2つのデータポイント間の類似性を評価するために,新しい測定基準を導入する。
我々の計量は、生成距離と生成測地学の概念的定義に繋がる。
彼らの近似は、穏やかな条件下で真の値に収束することが証明されている。
論文 参考訳(メタデータ) (2024-07-15T21:14:02Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。