論文の概要: Same Function, Different Mechanism: Implementation-Local Geometry Beyond Accuracy
- arxiv url: http://arxiv.org/abs/2611.01328v1
- Date: Sat, 31 Oct 2026 22:53:32 GMT
- ステータス: 情報取得中
- システム内更新日: 2026-11-03 19:55:47.292494
- Title: Same Function, Different Mechanism: Implementation-Local Geometry Beyond Accuracy
- Title(参考訳): 同じ機能, 異なるメカニズム: 正確性を超えた実装ローカル幾何
- Abstract要約: 2つのモデルは、実装が混乱しているときに、全く同じ予測をするが、異なる反応をすることができる。
我々はこれらのメカニズムを実装チャートで比較する: 特定の局所的なロジット摂動の族である。
モジュラー加法について、ルックアップと共有巡回チャートは、同じ予測にもかかわらず、$p(p-1)$と$p-1$のランクを持つ。
- 参考スコア(独自算出の注目度): 0.0
- License:
- Abstract: Two models can make exactly the same predictions yet respond differently when their implementations are perturbed. A lookup table can change one case independently; a shared rule couples changes across cases. We compare these mechanisms through an implementation chart: a specified local family of logit perturbations around a fixed predictive distribution. Our main result counts the independent prediction changes allowed by exact finite-group sharing: the active dimension is the number of input-output orbits minus the number of input orbits. For softened modular addition, lookup and shared cyclic charts therefore have ranks $p^2(p-1)$ and $p-1$ despite identical predictions. The classical Fisher pullback connects these dimensions to local KL curvature; mechanism-preserving reparameterizations leave the rank unchanged. We also bound the spectral tail under approximate sharing and separate quadratic rank from higher-order learning coefficients. Trained modular-addition models verify that chart rank is measurable, while controlled compiled transformers distinguish compiler-supported intermediate charts from matched alternatives. Negative controls show where this discrimination fails. The framework evaluates specified mechanism hypotheses; it does not infer a unique mechanism from predictions or predict training dynamics.
- Abstract(参考訳): 2つのモデルは、実装が混乱しているときに、全く同じ予測をするが、異なる反応をすることができる。
ルックアップテーブルは1つのケースを独立して変更することができる。
我々はこれらのメカニズムを実装チャートを通して比較する: 固定された予測分布の周囲の特定の局所的なロジット摂動の族である。
我々の主な結果は、正確な有限群共有によって許容される独立した予測変化を数えている: アクティブ次元は入力出力軌道の数に比例して入力出力軌道の数である。
モジュラー加法について、ルックアップと共有巡回チャートは、同じ予測にもかかわらず、$p^2(p-1)$と$p-1$のランクを持つ。
古典的なフィッシャーの引き戻しはこれらの次元を局所的なKL曲率に結びつける。
また、スペクトル尾部を近似的に共有し、高次学習係数から2次ランクを分離する。
トレーニングされたモジュラー付加モデルでは、チャートのランクが測定可能であることを確認し、制御されたコンパイルされたトランスフォーマーは、コンパイラがサポートする中間チャートと一致した代替品を区別する。
否定的な制御は、この差別がどこで失敗するかを示す。
このフレームワークは特定のメカニズムの仮説を評価し、予測やトレーニングダイナミクスの予測からユニークなメカニズムを推測しない。
関連論文リスト
- Probabilistic Counterfactual Inference for Discrete Outcomes in Gaussian-Process Causal Models [5.02231401459109]
不均一な変数型による反ファクト推論のための統一確率的フレームワークを提案する。
二変数に対する一様しきい値を用いた条件付きノイズ除去法を導出する。
結合ミス特定に対する評価精度,一貫性,ロバスト性を評価した。
論文 参考訳(メタデータ) (2026-10-06T17:06:22Z) - Privacy by Postprocessing the Discrete Laplace Mechanism [11.768495184175054]
古典的な離散的なラプラス(別名ジオメトリ)機構である「オールドドッグ」が「新しいトリックを実行する」ことができることを示す。
後処理することで、元のデータの任意の部分指数関数$f$の単純で偏りのない推定値が得られる。
論文 参考訳(メタデータ) (2026-05-07T16:19:08Z) - ShapShift: Explaining Model Prediction Shifts with Subgroup Conditional Shapley Values [21.035730606359174]
入力分布の変化は、機械学習モデルの平均予測におけるシフトを誘導することができる。
本稿では,データの解釈可能な部分群の条件付き確率変化に予測シフトをもたらすShapley値法を提案する。
モデルクラス間での予測シフトについて、単純で忠実でほぼ完全に説明できることを示す。
論文 参考訳(メタデータ) (2026-04-13T08:56:51Z) - The Ordered Matrix Dirichlet for Modeling Ordinal Dynamics [54.96229007229786]
観測された動作タイプに潜伏状態のマッピングを行うための順序付き行列ディリクレ(OMD)を提案する。
OMD上に構築されたモデルでは、解釈可能な潜在状態を復元し、数ショット設定で優れた予測性能を示す。
論文 参考訳(メタデータ) (2022-12-08T08:04:26Z) - The Counterfactual-Shapley Value: Attributing Change in System Metrics [10.804568364995982]
帰属問題の重要な要素は、単一入力の特定の変更によるシステム計量の(仮説的な)変化を推定することである。
本稿では,時系列予測モデルを用いて反事実を推定し,属性スコア CF-Shapley を構築する手法を提案する。
実世界のアプリケーションとして、広告マッチング密度の指標に観測された変化をもたらすことを目的として、クエリ-アドマッチングシステムを分析する。
論文 参考訳(メタデータ) (2022-08-17T16:48:20Z) - Control-Aware Prediction Objectives for Autonomous Driving [78.19515972466063]
本研究では,制御に対する予測の下流効果を評価するための制御認識予測目標(CAPOs)を提案する。
本稿では,エージェント間の注意モデルを用いた重み付けと,予測軌跡を接地真実軌跡に交換する際の制御変動に基づく重み付けの2つの方法を提案する。
論文 参考訳(メタデータ) (2022-04-28T07:37:21Z) - Understanding Interlocking Dynamics of Cooperative Rationalization [90.6863969334526]
選択的合理化(Selective rationalization)は、ニューラルネットワークの出力を予測するのに十分な入力の小さなサブセットを見つけることによって、複雑なニューラルネットワークの予測を説明する。
このような合理化パラダイムでは,モデルインターロックという大きな問題が浮かび上がっている。
A2Rと呼ばれる新しい合理化フレームワークを提案し、アーキテクチャに第3のコンポーネントを導入し、選択とは対照的にソフトアテンションによって駆動される予測器を提案する。
論文 参考訳(メタデータ) (2021-10-26T17:39:18Z) - Counterfactual Invariance to Spurious Correlations: Why and How to Pass
Stress Tests [87.60900567941428]
素早い相関」とは、アナリストが重要とすべきでないと考える入力データのある側面に対するモデルの依存である。
機械学習では、これらにはノウ・イ・ウ・ウ・ウ・ウ・ウ・ウ・ウ・ウ・ウ・ウ・ウ・ウ・ウ・ウ・ウ・ウ・ウ・ウ・ウ・ウ・ウ・ウ・ウ・ウ・ウ・ウ・ウ・ウ・ウ・ウ」という特徴がある。
因果推論ツールを用いたストレステストについて検討した。
論文 参考訳(メタデータ) (2021-05-31T14:39:38Z) - A Similarity Measure of Gaussian Process Predictive Distributions [0.0]
私たちは、予測しようとしている価値を客観的関数に有効に仮定するモデルを使うことに興味があります。
GPs予測分布を比較することができる一連の合成およびベンチマーク実験で実証的な証拠を示す。
この類似度メトリックはベイズ多様体最適化における目的を破棄するのに非常に有用である。
論文 参考訳(メタデータ) (2021-01-20T10:52:48Z) - Tractable Inference in Credal Sentential Decision Diagrams [116.6516175350871]
確率感性決定図は、解離ゲートの入力が確率値によってアノテートされる論理回路である。
我々は、局所確率を質量関数のクレーダル集合に置き換えることができる確率の一般化である、クレーダル感性決定図を開発する。
まず,ノイズの多い7セグメント表示画像に基づく簡単なアプリケーションについて検討する。
論文 参考訳(メタデータ) (2020-08-19T16:04:34Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。