論文の概要: MiA-Signature: Approximating Global Activation for Long-Context Understanding
- arxiv url: http://arxiv.org/abs/2605.06416v1
- Date: Thu, 07 May 2026 15:25:02 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-05-08 22:27:11.939315
- Title: MiA-Signature: Approximating Global Activation for Long-Context Understanding
- Title(参考訳): MiA署名: 長期理解のためのグローバルアクティベーションの近似
- Authors: Yuqing Li, Jiangnan Li, Mo Yu, Zheng Lin, Weiping Wang, Jie Zhou,
- Abstract要約: 我々は、クエリによって誘導されるグローバルなアクティベーションパターンの圧縮表現である textbfMindscape Activation Signature (MiA-Signature) の概念を導入する。
結果として得られるMiA-Signatureは、計算可能でありながらフルアクティベーション状態の効果を近似する条件信号として機能する。
- 参考スコア(独自算出の注目度): 48.9604042895266
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: A growing body of work in cognitive science suggests that reportable conscious access is associated with \emph{global ignition} over distributed memory systems, while such activation is only partially accessible as individuals cannot directly access or enumerate all activated contents. This tension suggests a plausible mechanism that cognition may rely on a compact representation that approximates the global influence of activation on downstream processing. Inspired by this idea, we introduce the concept of \textbf{Mindscape Activation Signature (MiA-Signature)}, a compressed representation of the global activation pattern induced by a query. In LLM systems, this is instantiated via submodular-based selection of high-level concepts that cover the activated context space, optionally refined through lightweight iterative updates using working memory. The resulting MiA-Signature serves as a conditioning signal that approximates the effect of the full activation state while remaining computationally tractable. Integrating MiA-Signatures into both RAG and agentic systems yields consistent performance gains across multiple long-context understanding tasks.
- Abstract(参考訳): 認知科学における研究の活発化は、報告可能な意識的アクセスが分散メモリシステム上での「emph{global ignition}」と関連していることを示唆している。
この緊張は、認知が下流処理におけるアクティベーションのグローバルな影響を近似するコンパクトな表現に依存するという、もっともらしいメカニズムを示唆している。
このアイデアに触発されて、クエリによって誘導されるグローバルなアクティベーションパターンの圧縮表現である \textbf{Mindscape Activation Signature (MiA-Signature)} の概念を導入した。
LLMシステムでは、これはアクティベートされたコンテキスト空間をカバーする、サブモジュールベースの高レベルな概念の選択によってインスタンス化される。
結果として得られるMiA-Signatureは、計算可能でありながらフルアクティベーション状態の効果を近似する条件信号として機能する。
MiA-SignaturesをRAGとエージェントシステムの両方に統合すると、複数の長時間コンテキスト理解タスク間で一貫したパフォーマンス向上が得られる。
関連論文リスト
- MANAR: Memory-augmented Attention with Navigational Abstract Conceptual Representation [1.1470070927586016]
コンテキスト化層は標準のマルチヘッドアテンションを一般化する。
ManARの概念的なアドレスは、入力トークンの外側に確実に横たわる表現を合成する。
論文 参考訳(メタデータ) (2026-03-19T09:37:18Z) - CAM: A Constructivist View of Agentic Memory for LLM-Based Reading Comprehension [55.29309306566238]
現在のLarge Language Models (LLM) は、長文文書を解釈する際に圧倒的な情報量に直面している。
この課題は、バニラLSMを自律的な読み出しエージェントに高めることができる凝集性メモリモジュールの必須性を高める。
我々はジャン・ピアジェの構成主義理論(Constructivist Theory)からインスピレーションを得て、エージェントメモリの3つの特性(構造化スキーマ、フレキシブルな同化、動的調節)を表現した。
論文 参考訳(メタデータ) (2025-10-07T02:16:30Z) - Explaining multimodal LLMs via intra-modal token interactions [55.27436637894534]
MLLM(Multimodal Large Language Models)は、様々な視覚言語タスクにおいて顕著な成功を収めているが、その内部決定機構は十分に理解されていない。
モーダル内相互作用を利用した解釈可能性の向上を提案する。
論文 参考訳(メタデータ) (2025-09-26T14:39:13Z) - MASA: Motion-aware Masked Autoencoder with Semantic Alignment for Sign Language Recognition [94.56755080185732]
本研究では,リッチモーションキューとグローバルセマンティック情報を統合したセマンティックアライメント(MASA)を用いたMotion-Awareマスク付きオートエンコーダを提案する。
我々のフレームワークは,包括的手話表現のための局所的な動きの手がかりとグローバルな意味的特徴を同時に学習することができる。
論文 参考訳(メタデータ) (2024-05-31T08:06:05Z) - Cross-Video Contextual Knowledge Exploration and Exploitation for
Ambiguity Reduction in Weakly Supervised Temporal Action Localization [23.94629999419033]
弱教師付き時間的行動ローカライゼーション(WSTAL)は、ビデオレベルのラベルを用いて、未トリミングビデオ中のアクションをローカライズすることを目的としている。
私たちの研究は、データセット内のビデオ間のコンテキスト知識を探索し、活用することで、これを新しい視点から解決します。
我々の手法は最先端の手法よりも優れており、他のWSTAL手法に簡単に接続できる。
論文 参考訳(メタデータ) (2023-08-24T07:19:59Z) - Global Context-Aware Progressive Aggregation Network for Salient Object
Detection [117.943116761278]
我々は,低レベルな外観特徴,高レベルな意味特徴,グローバルな文脈特徴を統合化するための新しいネットワークGCPANetを提案する。
提案手法は, 定量的かつ定性的に, 最先端の手法よりも優れていることを示す。
論文 参考訳(メタデータ) (2020-03-02T04:26:10Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。