論文の概要: Writability and the Pathway: A Controlled Study of Knowledge Injection into Addressed Memory
- arxiv url: http://arxiv.org/abs/2610.21553v1
- Date: Thu, 15 Oct 2026 09:14:29 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-17 06:09:33.016756
- Title: Writability and the Pathway: A Controlled Study of Knowledge Injection into Addressed Memory
- Title(参考訳): 書きやすさと経路:アドレス記憶への知識注入の制御に関する研究
- Abstract要約: アドレス付き条件記憶は、ホック後の知識注入のための局所的な表面を提供する。
この研究は、制御されたGPT-2とQwen3.8-Flash-Next-FP8とDeepSeek-V4.1-Flashのプロダクションメモリ実験を組み合わせる。
- 参考スコア(独自算出の注目度): 5.679081499318451
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Addressed conditional memory provides a local surface for post-hoc knowledge injection, but a successful write need not transfer to a new question or preserve untargeted behavior. This study combines a controlled GPT-2 comparison with production-memory experiments on Qwen3.8-Flash-Next-FP8 and DeepSeek-V4.1-Flash. Newly initialized modules attached to frozen GPT-2 are tested in a 2 x 2 design: row-only versus row-plus-projection updates, each with or without fixed module-residual anchoring. All arms reproduce 50 trained completions in each of three sampling seeds. Natural-question target-string hits average 5.3% for both row-only arms, 28.7% for unanchored projection updates, and 22.0% with anchoring, while strict answer scores remain zero. Anchoring lowers measured drift; lexical hits do not establish entity-specific retrieval. In the archived Qwen experiments, gradient writes make the designated first answer token top-ranked for 132 independently reset targets, comprising 93 new promotions and 39 already top-ranked targets. A separate matched 24-target comparison gives 13 new promotions with Adam versus two with SPSA at equal iteration counts but unequal computational procedures. An 80-row case includes saved continuations and a replay record, while reformulations bound its scope. Six DeepSeek zero-order cases yield one new target-token promotion and one regression. These results support bounded writing feasibility and separate trained expression, question-form behavior, and preservation; first-token rankings do not establish complete-answer success or universal conditions for writable memory.
- Abstract(参考訳): アドレス付き条件記憶は、ポストホックな知識注入のための局所的な表面を提供するが、成功した書き込みは、新しい質問に転送したり、未目標の動作を保存する必要はない。
この研究は、制御されたGPT-2とQwen3.8-Flash-Next-FP8とDeepSeek-V4.1-Flashのプロダクションメモリ実験を組み合わせる。
凍結したGPT-2にアタッチされた新しい初期化モジュールは2x2の設計でテストされる。
全ての腕は3つの標本のそれぞれで50個の訓練された完了を再現する。
両方の行のみのアームで平均5.3%、未調整のプロジェクションアップデートで28.7%、アンカーで22.0%、厳密な回答スコアはゼロである。
測定されたドリフトをアンコールする; 語彙的ヒットはエンティティ固有の検索を確立しない。
アーカイブされたQwen実験では、グラデーション書き込みにより、指定された最初の応答トークンが132個の個別リセットターゲットで上位にランクされ、93個の新しいプロモーションと39個の既に上位にランクされているターゲットで構成されている。
マッチした24ターゲットの比較では、AdamとSPSAで13の新しいプロモーションが、同じ反復数でSPSAで2回行われたが、計算手順は不等である。
80行のケースには保存された継続と再生レコードが含まれており、リフォームはそのスコープに縛られている。
6つのDeepSeekゼロオーダーケースは、1つの新たなターゲットツーケンプロモーションと1つのレグレッションをもたらす。
これらの結果は、有界書き込みの実現性と、個別に訓練された表現、質問形式行動、保存をサポートする。
関連論文リスト
- Benchmarking Self-Supervised 3D Medical Vision Foundation Models and Transferability Estimation [57.65266782182578]
セルフ教師付き事前トレーニングは、3D医療基盤モデルのプールを拡張したが、異なるデータセット、エンドポイント、微調整プロトコルを使用した評価を公表した。
14のセグメンテーション、分類、回帰タスク、複数の解剖学とモダリティにまたがる23の候補をベンチマークした。
3モデルショートリストは、7つのセグメンテーションタスクで記録された抜粋+訓練ジョブ時間を85.8%削減した。
論文 参考訳(メタデータ) (2026-10-13T01:52:19Z) - Do Prompt Optimizers Break Requirements They Are Not Scored On? A Preregistered Study [0.36013539748644224]
プロンプトは1つの目標メトリックを上げるプロンプトを書き直しますが、メトリックが得点しない状態要件も示します。
事前登録された調査では、HotpotQA、SQu 2.0、IFEval上でGEPA、MIPROv2、TextGradを実行し、未承認要件のイテム単位の違反をカウントします。
事前登録された基準により、3つのプロンプトは全て、ほぼHotpotQA上で回帰を生成する。
論文 参考訳(メタデータ) (2026-10-09T09:38:51Z) - What to Admit and How to Present: Governing Persistent Memory in LLM Agents [3.0075075797261532]
私たちは、承認とプレゼンテーションの2つのガバナンス決定を区別します。
再トレーニングなしに2つの推論時設計を実装した。
対訳 FC と PS はプールド・ジャッジ・アセスド・失敗率を低下させる。
論文 参考訳(メタデータ) (2026-10-08T03:45:28Z) - Predict Before You Deploy: Offline Prediction of Quantization-Induced Task Degradation for World Action Models [2.347191837057308]
トレーニング後の量子化はメモリを削減するが、ビット幅、グループ化、および量子化器の選択は大きな構成空間を定義する。
オフライン動作偏差から量子化によるタスク劣化を予測するためのポリシ校正フレームワークであるPreDEを提案する。
独立に調整された2つのポリシーに対する450のフランカ・リサーチ3の試験では、試験前に高分解能グループに割り当てられた全ての構成が著しく劣化した。
論文 参考訳(メタデータ) (2026-09-16T21:25:37Z) - ReDraft, Don't Just Distill: Reference-Driven Revision for Continual VLLM Post-Training [66.72708893922605]
大規模なマルチモーダルモデルのポストトレーニングは、事前トレーニングから保護しながら、新しい機能を追加する必要がある。
SFTは、タスクをほぼゼロの精度から学習する明確なターゲット監視を提供するが、そのオフポリティックターゲットはモデルを十分に移動させ、忘れる原因となる。
モデル自身の失敗から両方を得るReDraftを紹介します。
論文 参考訳(メタデータ) (2026-09-15T04:59:03Z) - Two tests of phase-structure features for transition prediction [0.0]
本報告では, 2つの設定において, 位相特性が統合ベースライン上での終端予測を改善するか否かを検討する。
研究1は、封印されたスコアの前に矛盾カテゴリーパイプラインを凍結する。
研究2では,1,415の回答-変化比較と20の繰り返し,5倍の群によるクロスバリデーションを用いて,ブロックb0-b4に対する15の治療法を開発した。
論文 参考訳(メタデータ) (2026-08-31T20:29:18Z) - ABAI at COLIEE 2026 Task 1: Multi-Stage Retrieval with GraphRAG-Enhanced Meta-Learning, and a Post-Hoc Study of the Cross-Validation-to-Test Gap [7.5681086280820615]
我々は,ABAI 申請を COLIEE 2026 Task 1 に提示する。
このタスクは引用されたパス自体を抑圧し、レトリバーが依存する語彙の重複の多くを取り除く。
私たちのパイプラインは、4つの独立して訓練されたステージでこれに答えます。
論文 参考訳(メタデータ) (2026-08-12T13:05:09Z) - Stage-Replay Divergence Follows the KV Cache: Fixed-Prefix Precision Controls and Bidirectional Cache Transplantation [51.56484100374058]
Stage-replayは中間トークンプレフィックスを再構築し、プレフィックスに最初に到達したデコーダ状態からの継続として、新しいプリフィル継続を処理する。
一致した200itemの実験では、保持されたライブキャッシュと同一の整数トークンのワンショットプリフィルを比較し、両側に正確なレプリカを配置する。
論文 参考訳(メタデータ) (2026-07-30T16:41:40Z) - ImplicitMemBench: Measuring Unconscious Behavioral Adaptation in Large Language Models [60.14219417402433]
LLMエージェントの既存のメモリベンチマークは、事実の明示的なリコールを評価するが、意識的な検索なしに、経験が自動的な振る舞いになる暗黙の記憶を見落としている。
IndicitMemBenchは、非宣言的メモリの標準的な認知科学のアカウントから引き出された3つの構造を通して暗黙的メモリを評価する最初の体系的なベンチマークである。
当社の300イテムスイートでは,初動採点を備えたLearning/Priming-Interfere-Testプロトコルを統一しています。
論文 参考訳(メタデータ) (2026-04-09T10:26:32Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。