論文の概要: Measuring Memory and Generalization as Separable Geometric Channels: The Topo^2 Framework
- arxiv url: http://arxiv.org/abs/2608.30487v1
- Date: Mon, 31 Aug 2026 09:13:00 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-09-01 18:31:31.328265
- Title: Measuring Memory and Generalization as Separable Geometric Channels: The Topo^2 Framework
- Title(参考訳): 分離可能な幾何学的チャネルとしてのメモリと一般化の測定:Topo^2フレームワーク
- Abstract要約: Topo2は、ノイズラベルを因果的に分離し、測定し、法定化するための測定フレームワークである。
フレームワークの境界は、9つのデッドエンドのファルシフィケーション台帳と、グローバル統計の6つのファミリーを除外した計器認証セクションである。
- 参考スコア(独自算出の注目度): 6.563951845492912
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Deep networks trained on noisy labels simultaneously generalize on clean data and memorize flipped labels. These are usually conflated as pressures on one capacity. We present Topo^2, a measurement framework that makes them causally separable, measurable, and law-governed. Persistent-homology H1 structure of the representation space separates into a within-class manifold channel (a function of the training stopping point) and a cross-class channel (a monotone readout of memorized flipped samples). An intervention, the FM0 prescription (zero loss on flipped samples from epoch 0), reaches each setting's generalization ceiling while memorizing essentially nothing. Within the framework we establish a law set with graded evidence: (L2) FM0 separation prescription (9/9); (L1) the within-channel as a training-position function (mid-rise 6/6; convergence-back CIFAR 3/3, SVHN 2/3); (L3) a ring-construction identity (definitional, not a law); and TLS (memory-generalization topological layering): memory is causally additive, anchored (silencing clean collapses the representation), invertible (stripping memory restores near-ceiling generalization), and quantitatively billable (the memorization cost law, effective slope coefficient C ~ 0.38 at the reference capacity: CIFAR-10 0.3801 / SVHN 0.3806 / CIFAR-100 0.384 / VGG 0.3715, capacity-dependent in general and traced to clean-sample feature displacement). We also publish the framework's boundaries: a falsification ledger of nine dead ends, and an instrument-vindication section that excludes six families of global statistics as explanations of the within-channel. The framework turns "memorization" from an ill-defined capacity into a measurable, separable, invertible topological layer.
- Abstract(参考訳): ノイズの多いラベルでトレーニングされたディープネットワークは、クリーンなデータに基づいて同時に一般化し、フリップされたラベルを記憶する。
これらは通常、1つの容量の圧力として膨らませられる。
Topo^2は, 因果的に分離可能, 測定可能, 法定化可能な測定フレームワークである。
表現空間の永続ホモロジーH1構造は、内部クラス多様体チャネル(トレーニング停止点の関数)とクロスクラスチャネル(記憶されたフリップされたサンプルの単調な読み出し)に分離される。
介入、FM0処方(エポック0からの反転サンプルのゼロ損失)は、基本的に何も記憶せず、各設定の一般化天井に達する。
L2) FM0分離法(9/9), (L1) トレーニングポジション関数としてのチャネル内チャネル(中間層6/6), 収束バック CIFAR 3/3, SVHN 2/3), (L3) リング構成アイデンティティ(定義法ではなく, 法則) TLS (メモリ一般化トポロジカル層化): メモリは因果的に付加され, アンカー化され, 非可逆的(スリッピングメモリは, 近点一般化を回復する), 定量的に請求可能である(記憶コスト法, 有効傾斜係数C~0.38)。
また,9つの死点を持つファルシフィケーション台帳と,内部チャネルの説明として,グローバル統計の6つのファミリを除外する計器接種部を公表する。
このフレームワークは「記憶」を不定義の容量から可測で分離可能で可逆な位相層に変える。
関連論文リスト
- When Do Internal Probes Beat Reading the Answer? Miscalibrated Readouts and Behavior-Concealed Knowledge in Language Models [0.0]
1200の論理的結論の検証を依頼された言語モデルは、毎回YESに答える。
隠れた状態の線形プローブは、0.96 AUCで正しい判定を読み取った。
判決がどこで失われるかを問うと、支配的な失敗は1つのスカラーであることがわかった。
診断は、90のセマンティックラベル構成で、5つのモデル、3つのファミリーの因子的、行動的精度が閾値オフセットの1つの関数に崩壊する。
論文 参考訳(メタデータ) (2026-09-04T00:26:45Z) - In-Cell Learning: Deployed Language Models Can Learn New Knowledge Without Changing a Single Stored Bit [4.726337413307433]
4ビットのリリースでは、各重みを整数コードと共有スケールとして格納し、格納された値の間に量子化器が捨てる間隔を残していることを示す。
私たちは、新しい知識をそのインターバルに書き込むパラダイムを、インセルラーニングと呼ぶ。
CellFillは、内部の低ランクの位置をベンダー自身の4ビットリリースでトレーニングすることで、構築によってパラダイムを実現する。
論文 参考訳(メタデータ) (2026-08-21T08:49:07Z) - Support Operation Factorization: Compositional Readout of Frozen Vision Encoders under Controlled Interventions [87.95757610455173]
我々は、x演算グリッドとSO-OPFをサポートするために、インジェクティブに整合した残余セルアウトプロトコルを導入する。
グリッドが分かっているときにキャリアがホールドアウトバインディングを構成するかどうか、フラットなセルラベルからグリッドを回収できるかどうかという2つの質問を分離する。
論文 参考訳(メタデータ) (2026-08-06T15:38:55Z) - The Orthogonalized Read Is a Removable Training Scaffold for Recurrent Memory [0.0]
効果は再現されるが、メモリ改善ではない。
この任務の訓練は、急激な脱出に続き、長い確率の台地である。
公開された利益の多くは、アーキテクチャをまったく必要としない。
論文 参考訳(メタデータ) (2026-07-02T18:54:23Z) - Forensic Trajectory Signatures for Agent Memory Poisoning Detection [0.0]
攻撃が成功するには、email_send_emailの前にMemory_recall_factを呼び出す必要がある。
この不変量のみを利用する単純な規則は AUC = 0.9563 となる。
厳密にプレフィックスのみの変種は AUC = 0.934 を達成し、リアルタイムブロッキングは適度な劣化で実現可能であることを示唆している。
論文 参考訳(メタデータ) (2026-06-29T17:09:03Z) - Right Makes Might: Aligning Verified Hidden States Empowers RL Reasoning [55.264863369127774]
現在の方法では、それぞれの正しいロールアウトを単一の報酬ビットに減らし、隠れた状態間で共有される幾何学的構造を無視している。
本稿では,RLトレーニングにおけるアンカートークンにおける正ロールアウトの最終層を,トレーニングと推論の両方においてゼロオーバーヘッドで整列する補助損失関数Hidden-Alignを提案する。
8つの数学的推論ベンチマークでは、Hidden-AlignはDAPOベースラインの平均パス@1をQwen3-1.7B, 4B, 14Bで3.8, 6.2, 5.4ポイント改善し、3つのスケールで一貫したパス@kゲインを得る。
論文 参考訳(メタデータ) (2026-06-02T06:51:15Z) - Rethinking Memory as Continuously Evolving Connectivity [63.58181883607843]
既存のメモリ拡張LDMエージェントは、メモリを事前定義された表現と固定された検索パイプラインを備えた静的リポジトリとして扱う。
メモリをヘテロジニアスなグラフとしてモデル化し,そのトポロジを3段階にわたって段階的に洗練する,コネクティビティ進化型メモリフレームワークであるFluxMemを提案する。
LoCoMo、Mind2Web、GAIAなど、根本的に異なる3つのベンチマークにおいて、FluxMemは一貫した最先端のパフォーマンスを実現し、複雑なエージェント環境において強力な適応と一般化を示す。
論文 参考訳(メタデータ) (2026-05-27T17:35:34Z) - Localizing Memorized Regions in Diffusion Models via Coordinate-Wise Curvature Differences [7.519872646378835]
拡散モデルは、意図せずトレーニングサンプルを記憶し、プライバシと著作権に関する懸念を提起する。
局所記憶の幾何的特徴は座標方向の分散崩壊である。
我々は、広く使われているスコア差検出指標の幾何学的説明を提供するスコア差検出プロキシを導出する。
論文 参考訳(メタデータ) (2026-05-26T09:28:43Z) - A Gauge Theory of Superposition: Toward a Sheaf-Theoretic Atlas of Neural Representations [0.0]
本研究では,大言語モデル(LLM)における重ね合わせの枠組みを開発し,局所意味チャートの層理論的アトラスに置き換える。
コンテキストは階層化されたコンテキスト複合体にクラスタ化され、各チャートは局所的な特徴空間と局所的な情報幾何学的計量を持つ。
これにより、フィッシャー重み付き干渉エネルギーと3つの測定可能な障害物が大域的解釈可能性に結びつく。
論文 参考訳(メタデータ) (2026-02-28T22:05:14Z) - GSMFlow: Generation Shifts Mitigating Flow for Generalized Zero-Shot
Learning [55.79997930181418]
Generalized Zero-Shot Learningは、目に見えないクラスから見えないクラスに意味的な知識を移すことで、目に見えないクラスと見えないクラスの両方から画像を認識することを目的としている。
生成モデルの利点を生かして、見学したクラスから学んだ知識に基づいて、現実的な見知らぬサンプルを幻覚させることは、有望な解決策である。
本研究では,複数の条件付きアフィン結合層からなるフローベース生成フレームワークを提案する。
論文 参考訳(メタデータ) (2022-07-05T04:04:37Z) - Mitigating Generation Shifts for Generalized Zero-Shot Learning [52.98182124310114]
一般化ゼロショット学習(英: Generalized Zero-Shot Learning、GZSL)は、学習中に見知らぬクラスが観察できない、見つからないサンプルを認識するために意味情報(属性など)を活用するタスクである。
本稿では,未知のデータ合成を効率よく,効率的に学習するための新しい生成シフト緩和フローフレームワークを提案する。
実験結果から,GSMFlowは従来のゼロショット設定と一般化されたゼロショット設定の両方において,最先端の認識性能を実現することが示された。
論文 参考訳(メタデータ) (2021-07-07T11:43:59Z) - Federated Functional Gradient Boosting [75.06942944563572]
フェデレーション学習における機能最小化に関する研究
FFGB.C と FFGB.L は、特徴分布がより均一になるにつれて収束半径が 0 に縮まる。
論文 参考訳(メタデータ) (2021-03-11T21:49:19Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。