論文の概要: An approach to Fisher-Rao metric for infinite dimensional non-parametric information geometry
- arxiv url: http://arxiv.org/abs/2512.21451v1
- Date: Thu, 25 Dec 2025 00:18:41 GMT
- ステータス: 情報取得中
- システム内更新日: 2025-12-29 11:56:33.713449
- Title: An approach to Fisher-Rao metric for infinite dimensional non-parametric information geometry
- Title(参考訳): 無限次元非パラメトリック情報幾何学のためのフィッシャー・ラオ計量へのアプローチ
- Authors: Bing Cheng, Howell Tong,
- Abstract要約: 無限次元であることから、非パラメトリックな情報幾何学は長い間「難易度障壁」に直面してきた。
本稿では,タンジェント空間の直交分解による難易度解決のための新しい枠組みを提案する。
情報キャプチャ比を定義することにより,高次元データの内在次元を推定する厳密な手法を提案する。
- 参考スコア(独自算出の注目度): 0.6138671548064355
- License:
- Abstract: Being infinite dimensional, non-parametric information geometry has long faced an "intractability barrier" due to the fact that the Fisher-Rao metric is now a functional incurring difficulties in defining its inverse. This paper introduces a novel framework to resolve the intractability with an Orthogonal Decomposition of the Tangent Space ($T_fM=S \oplus S^{\perp}$), where S represents an observable covariate subspace. Through the decomposition, we derive the Covariate Fisher Information Matrix (cFIM), denoted as $G_f$, which is a finite-dimensional and computable representative of information extractable from the manifold's geometry. Indeed, by proving the Trace Theorem: $H_G(f)=\text{Tr}(G_f)$, we establish a rigorous foundation for the G-entropy previously introduced by us, thereby identifying it not merely as a gradient-based regularizer, but also as a fundamental geometric invariant representing the total explainable statistical information captured by the probability distribution associated with the model. Furthermore, we establish a link between $G_f$ and the second-order derivative (i.e. the curvature) of the KL-divergence, leading to the notion of Covariate Cramér-Rao Lower Bound(CRLB). We demonstrate that $G_f$ is congruent to the Efficient Fisher Information Matrix, thereby providing fundamental limits of variance for semi-parametric estimators. Finally, we apply our geometric framework to the Manifold Hypothesis, lifting the latter from a heuristic assumption into a testable condition of rank-deficiency within the cFIM. By defining the Information Capture Ratio, we provide a rigorous method for estimating intrinsic dimensionality in high-dimensional data. In short, our work bridges the gap between abstract information geometry and the demand of explainable AI, by providing a tractable path for revealing the statistical coverage and the efficiency of non-parametric models.
- Abstract(参考訳): 無限次元であることから、非パラメトリックな情報幾何学は、フィッシャー・ラオ計量がその逆を定義するのに機能的な帰納的困難であるという事実から、長い間「難易度障壁」に直面してきた。
本稿では, タンジェント空間の直交分解(T_fM=S \oplus S^{\perp}$)を用いて, S が可観測共変部分空間を表すという, 難解性を解決する新しい枠組みを提案する。
この分解を通じて、多様体の幾何から抽出可能な情報の有限次元および計算可能な代表である$G_f$と表される共変量漁業情報行列(cFIM)を導出する。
実際、トレース定理の証明により、$H_G(f)=\text{Tr}(G_f)$ は、我々が以前に導入したG-エントロピーの厳密な基礎を確立し、単に勾配ベースの正規化子としてだけでなく、モデルに関連する確率分布によって得られた総説明可能な統計情報を表す基本的な幾何学的不変量として同定する。
さらに、KL-発散の2階微分(すなわち曲率)と$G_f$の関係を確立し、コバリケート・クラメール・ラオ下界(CRLB)の概念を導いた。
我々は、$G_f$が効率的な漁業情報行列と一致していることを示し、半パラメトリック推定器の分散の基本的な限界を与える。
最後に、我々の幾何学的枠組みをマニフォールド仮説に適用し、後者をヒューリスティックな仮定から、cFIM内のランク欠陥の証明可能な条件へと持ち上げる。
情報キャプチャ比を定義することにより,高次元データの内在次元を推定する厳密な手法を提案する。
要約すると、我々の研究は、統計的カバレッジと非パラメトリックモデルの効率を明らかにするためのトラクタブルパスを提供することで、抽象情報幾何学と説明可能なAIの需要のギャップを埋める。
関連論文リスト
- Manifold Percolation: from generative model to Reinforce learning [0.26905021039717986]
生成的モデリングは通常、学習マッピング規則としてフレーム化されるが、これらの規則にアクセスできない観察者の視点からすると、そのタスクは確率分布から幾何学的支援を引き離すことになる。
本研究は, サンプリングプロセスが, 高次元密度推定を支持面上の幾何カウント問題に効果的に投射するので, 連続体パーコレーションは, この支援解析に一意に適していることを示す。
論文 参考訳(メタデータ) (2025-11-25T17:12:42Z) - Provable Non-Convex Euclidean Distance Matrix Completion: Geometry, Reconstruction, and Robustness [8.113729514518495]
ユークリッド距離行列補完問題は、センサーネットワークの局所化、分子ロバスト性、多様体学習など、幅広い応用で発生する。
本稿では,正半定値グラム行列の空間上の低ランク行列補完タスクを提案する。
利用可能な距離の測定は非直交基底で拡張係数として符号化され、グラム行列の最適化は非負性や三角形の不等式を通じて暗黙的に幾何的整合を強制する。
論文 参考訳(メタデータ) (2025-07-31T18:40:42Z) - CP$^2$: Leveraging Geometry for Conformal Prediction via Canonicalization [51.716834831684004]
幾何データシフトにおける共形予測(CP)の問題について検討する。
本稿では,幾何的ポーズなどの幾何学的情報を統合することを提案する。
論文 参考訳(メタデータ) (2025-06-19T10:12:02Z) - Finsler Multi-Dimensional Scaling: Manifold Learning for Asymmetric Dimensionality Reduction and Embedding [41.601022263772535]
次元化の削減は、データ分析や可視化における中心的な応用とともに、重要なパターンを保ちながら、特徴的次元を減らし、複雑なデータを単純化することを目的としている。
基礎となるデータ構造を維持するため、多次元スケーリング(MDS)法は距離などの対等な相似性を保存することに重点を置いている。
論文 参考訳(メタデータ) (2025-03-23T10:03:22Z) - The Fisher-Rao geometry of CES distributions [50.50897590847961]
Fisher-Rao情報幾何学は、ツールを微分幾何学から活用することができる。
楕円分布の枠組みにおけるこれらの幾何学的ツールの実用的利用について述べる。
論文 参考訳(メタデータ) (2023-10-02T09:23:32Z) - Last-Iterate Convergence of Adaptive Riemannian Gradient Descent for Equilibrium Computation [52.73824786627612]
本稿では,テクスト幾何学的強単調ゲームに対する新たな収束結果を確立する。
我々のキーとなる結果は、RGDがテクスト幾何学的手法で最終定位線形収束を実現することを示しています。
全体として、ユークリッド設定を超えるゲームに対して、幾何学的に非依存な最終点収束解析を初めて提示する。
論文 参考訳(メタデータ) (2023-06-29T01:20:44Z) - Improving Metric Dimensionality Reduction with Distributed Topology [68.8204255655161]
DIPOLEは、局所的、計量的項と大域的、位相的項の両方で損失関数を最小化し、初期埋め込みを補正する次元推論後処理ステップである。
DIPOLEは、UMAP、t-SNE、Isomapといった一般的な手法よりも多くの一般的なデータセットで優れています。
論文 参考訳(メタデータ) (2021-06-14T17:19:44Z) - A Unifying and Canonical Description of Measure-Preserving Diffusions [60.59592461429012]
ユークリッド空間における測度保存拡散の完全なレシピは、最近、いくつかのMCMCアルゴリズムを単一のフレームワークに統合した。
我々は、この構成を任意の多様体に改善し一般化する幾何学理論を開発する。
論文 参考訳(メタデータ) (2021-05-06T17:36:55Z) - Understanding Implicit Regularization in Over-Parameterized Single Index
Model [55.41685740015095]
我々は高次元単一インデックスモデルのための正規化自由アルゴリズムを設計する。
暗黙正則化現象の理論的保証を提供する。
論文 参考訳(メタデータ) (2020-07-16T13:27:47Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。