論文の概要: A Fiber Criterion for Representation Identifiability in Supervised Learning
- arxiv url: http://arxiv.org/abs/2606.01092v1
- Date: Sun, 31 May 2026 08:25:07 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-06-02 21:34:29.200954
- Title: A Fiber Criterion for Representation Identifiability in Supervised Learning
- Title(参考訳): 教師付き学習における表現識別性のための繊維基準
- Authors: Vasileios Sevetlidis,
- Abstract要約: 教師付き学習は、その入出力行動を通じて予測器を評価する。
本稿では,結果の表現レベル識別可能性問題を定式化する。
その結果、表現レベルのクレームは、予測行動だけでなく、仮定、目的、測定、帰納的バイアスを必要とすることが明らかとなった。
- 参考スコア(独自算出の注目度): 0.0
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Supervised learning evaluates predictors through their input-output behavior. When a predictor is implemented as a composition $f=c\circ h$, supervised evidence constrains the composite map $f$ but need not determine the representation-head factorization $(h,c)$. This paper formalizes the resulting representation-level identifiability problem: for a class of admissible representation-head pairs, a representation property is identifiable from the induced predictor exactly when it is constant on the fibers of the projection $(h,c)\mapsto c\circ h$, equivalently when it descends to a well-defined property of the predictor. Predictor-preserving augmentation gives a canonical obstruction: auxiliary information can be appended to a representation while the head ignores it, leaving the predictor unchanged but altering properties such as minimality, compression, invariance, equivariance, nuisance information, or semantic accessibility. This construction separates representation identifiability from optimization and finite-sample estimation. Finite-sample diagnostics illustrate, rather than prove, the criterion: exact algebraic witnesses hold the predictor fixed while changing representation diagnostics, and matched-performance Waterbirds models show that different constraints can select different representations at similar supervised performance. The results clarify that representation-level claims require assumptions, objectives, measurements, or inductive biases beyond supervised predictive behavior alone.
- Abstract(参考訳): 教師付き学習は、その入出力行動を通じて予測器を評価する。
予測器が合成 $f=c\circ h$ として実装されるとき、教師付きエビデンスによって合成写像 $f$ が制約されるが、表現ヘッド因数分解 $(h,c)$ は決定されない。
本論文は,表現レベルの識別可能性に関する問題を定式化したものである: 許容表現-頭部対のクラスにおいて,表現特性は,投影$(h,c)\mapsto c\circ h$のファイバー上で定数である場合に,誘導予測器から正確に識別可能である。
補助情報は、頭が無視している間に表現に付加することができ、予測器は変更せず、最小性、圧縮、不変性、不変性、不変性、ニュアンス情報、セマンティックアクセシビリティなどの特性を残せる。
この構成は、表現の識別可能性と最適化と有限サンプル推定を分離する。
正確な代数的目撃者は、表現診断を変更しながら予測器を固定し、一致した性能のウォーターバードモデルは、異なる制約が同様の監督されたパフォーマンスで異なる表現を選択可能であることを示す。
その結果、表現レベルのクレームは、予測行動だけでなく、仮定、目的、測定、帰納的バイアスを必要とすることが明らかとなった。
関連論文リスト
- What Makes a Representation Good for Single-Cell Perturbation Prediction? [37.84894703250901]
PerturbedVAEは、この信号の不均衡を解決するために設計された一般的なフレームワークである。
摂動効果を確実に回復できる条件を特徴付ける識別可能性分析を提供する。
PerturbedVAEは、広く使われている複数の評価設定で最先端のパフォーマンスを達成する。
論文 参考訳(メタデータ) (2026-05-19T04:30:11Z) - FACTOR: Counterfactual Training-Free Test-Time Adaptation for Open-Vocabulary Object Detection [63.91351553178842]
FACTORはオープン語彙オブジェクト検出のためのトレーニング不要なテスト時間適応である。
属性依存性の予測を選択的に抑制するために、属性の感度、意味的関連性、予測のバリエーションを定量化する。
PASCAL-C, COCO-C, FoggyCityscapes の実験では、FACTOR が従来の TTA 法より一貫して優れていたことが示されている。
論文 参考訳(メタデータ) (2026-05-05T02:31:18Z) - Enhancing Pre-trained Representation Classifiability can Boost its Interpretability [112.296393156262]
表現内の解釈可能な意味の比率との相関を利用して、表現解釈可能性の定量化を行う。
Inherent Interpretability Score(IIS)を提案し、情報損失を評価し、解釈可能なセマンティクスの比率を測定し、表現解釈可能性の定量化を行う。
論文 参考訳(メタデータ) (2025-10-28T06:21:06Z) - Emergence of Quantised Representations Isolated to Anisotropic Functions [0.0]
本稿では,既存のスポットライト共振法に基づく表現構造決定手法を提案する。
これは、アクティベーション関数のみを変更する制御されたアブレーション研究を通じて、オートエンコーダモデルにおいて、個々の表現がどのように出現し、組織化できるかを示す。
この手法を用いて、関数駆動対称性が表現に暗黙の帰納バイアスとして作用するかどうかを判定する。
論文 参考訳(メタデータ) (2025-07-16T09:27:54Z) - I Predict Therefore I Am: Is Next Token Prediction Enough to Learn Human-Interpretable Concepts from Data? [76.15163242945813]
大規模言語モデル (LLM) は、多くの人が知能の形式を示すと結論づけている。
本稿では,潜在離散変数として表現される人間解釈可能な概念に基づいてトークンを生成する新しい生成モデルを提案する。
論文 参考訳(メタデータ) (2025-03-12T01:21:17Z) - Identifiable Latent Neural Causal Models [82.14087963690561]
因果表現学習は、低レベルの観測データから潜伏した高レベルの因果表現を明らかにすることを目指している。
因果表現の識別可能性に寄与する分布シフトのタイプを決定する。
本稿では,本研究の成果を実用的なアルゴリズムに翻訳し,信頼性の高い潜在因果表現の取得を可能にする。
論文 参考訳(メタデータ) (2024-03-23T04:13:55Z) - Predictive Inference with Feature Conformal Prediction [80.77443423828315]
本稿では,特徴空間への共形予測の範囲を拡大する特徴共形予測を提案する。
理論的観点からは、特徴共形予測は軽度の仮定の下で正則共形予測よりも確実に優れていることを示す。
提案手法は,バニラ共形予測だけでなく,他の適応共形予測手法と組み合わせることができる。
論文 参考訳(メタデータ) (2022-10-01T02:57:37Z) - Learning Disentangled Representations with Latent Variation
Predictability [102.4163768995288]
本稿では,潜在不整合表現の変動予測可能性について述べる。
逆生成プロセス内では、潜時変動と対応する画像対の相互情報を最大化することにより、変動予測可能性を高める。
本研究では,潜在表現の絡み合いを測るために,基礎的構造的生成因子に依存しない評価指標を開発する。
論文 参考訳(メタデータ) (2020-07-25T08:54:26Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。