論文の概要: Entropy in Conversational AI: Structured Unpredictability as Inferrable Interiority
- arxiv url: http://arxiv.org/abs/2609.19044v1
- Date: Mon, 20 Jul 2026 23:03:28 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-09-28 05:09:55.609423
- Title: Entropy in Conversational AI: Structured Unpredictability as Inferrable Interiority
- Title(参考訳): 会話型AIにおけるエントロピー:予測不能な内部性としての構造的不予測性
- Abstract要約: 選択層は、容量制限されたストリームから低次元のスタイル・アンド・アテンション状態を更新し、固定ベースモデルで複数の応答を生成し、新規性及び状態親和性を選択する。
合成実装はパイプラインを検証し、ポイントレベルでの4つの前向きな急速凍結分岐特徴と一致する。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Sampling can increase response diversity without producing history-dependent behavior. We formalize a different design target, structured unpredictability, as conditional dependence between an output and a persistent hidden state beyond what an observer can infer from the transcript. A selection layer updates a low-dimensional style-and-attention state from a capacity-limited stream, generates several responses with a fixed base model, and selects for novelty and state affinity. Evaluation uses scripted sequences of independent prompt turns: the base model receives the current turn and rendered state, but not the preceding dialogue; cross-turn dependence resides in the wrapper state and response selector. A synthetic implementation validates the pipeline and matches four prospectively hash-frozen divergence features at point level. In the final real-model grid (mlx-community/Qwen2.5-1.5B-Instruct-4bit; 56 sequences per arm), the mechanism increased lexical novelty over the low-variance and consistency-only controls by 0.073 and 0.023, respectively. Its stylometric-consistency contrast with novelty-matched sampling was equivalent to zero under the registered smallest-effect rule, so the joint novelty-consistency criterion failed. The original two-part accumulation criterion also failed; a revised final-grid contrast, frozen after the powered grid, found higher consistency than the memory-reset ablation (0.028, 95% CI [0.018,0.039]), but does not establish path dependence. Twin separation was not established (0.003, 95% CI [-0.011,0.019]); the mean curve's saturating curvature matched the frozen prediction, which without separation does not support path dependence. Probe-level capability equivalence held within +/-0.10 on a near-ceiling battery, while output quality was not evaluated. All outcomes are machine-scored; no claims about perceived mind or consciousness are tested.
- Abstract(参考訳): サンプリングは、履歴に依存した振る舞いを生成することなく、応答の多様性を高めることができる。
我々は、出力と永続的な隠蔽状態の間の条件依存として、異なる設計対象、構造化された予測不可能を定式化する。
選択層は、容量制限されたストリームから低次元のスタイル・アンド・アテンション状態を更新し、固定ベースモデルで複数の応答を生成し、新規性及び状態親和性を選択する。
ベースモデルは現在のターンとレンダリングされた状態を受信するが、前のダイアログは受信しない; クロスターン依存はラッパー状態と応答セレクタに存在する。
合成実装はパイプラインを検証し、ポイントレベルでの4つの前向きな急速凍結分岐特徴と一致する。
最終リアルモデルグリッド(mlx-community/Qwen2.5-1.5B-Instruct-4bit; 56 sequences per arm)では、それぞれ0.073と0.023の低分散と整合性のみの制御に対する語彙的ノベルティが増大した。
構造的整合性と新規整合性サンプリングとの対比は, 登録された最小効効力規則ではゼロに等しいため, 連立新規整合性基準は成立しなかった。
パワーグリッドの後に凍結された最終格子のコントラストは、メモリリセットアブレーション(0.028, 95% CI [0.018,0.039])よりも高い一貫性を示したが、パス依存は確立しなかった。
平均曲線の飽和曲率と凍結予測は一致し, 分離なしでは経路依存を支えないことがわかった。
出力品質は評価されなかったが、近焼電池で+//-0.10の範囲内で保持されるプローブレベルの能力等価性は評価されなかった。
すべての結果は機械で表され、知覚された心や意識に関する主張は検査されない。
関連論文リスト
- Vision: Data-Centric Anchoring for Robust and Interpretable Agentic AI [21.406298170489507]
我々は、堅牢性と解釈可能性は、トレーニング後のモデルから抽出するのではなく、データ環境に組み込むべきだと論じている。
私たちの中心的な貢献は、Curate、Augment、Constrain、Attributeの4段階フレームワークであるData-Centric Agentic Loopです。
このフレームワークは4つのコア障害モードをデータライフサイクルにリンクする、障害駆動型分類に基盤を置いています。
論文 参考訳(メタデータ) (2026-09-08T03:57:54Z) - Why Does the Future Branch? Identifiable Closure Tests for Stochastic Physical World Models [0.0]
ClosurePairsは、繰り返し発生する障害を伴う互換性のあるマイクロステートを横断します。
ソースの属性は確実に回復する。
非線形相互作用ベンチマークにおける等予算分解誤差を低減する。
論文 参考訳(メタデータ) (2026-08-01T11:07:24Z) - Hidden APIs in Language Models: Discovering Reusable Causal Interfaces from Forked Futures [16.400856187081473]
将来の操作はプレフィックス状態が形成された後にのみサンプリングされる。
これにより、研究者によって特定された潜伏ラベルを必要とせず、隠れた状態に対する経験的因果商が得られる。
結果は、試験された運転銀行内の経済的再利用可能な因果関係を支持する。
論文 参考訳(メタデータ) (2026-07-30T03:10:24Z) - Operational Proto-Introspection in Looped Language Models: Process-Quality Taps, Executable Branching, and the Readout-Control Boundary [0.0]
言語モデルは、進行中の計算の質を読み取ることができるか?
外部介入は、その読み出しをより良い結果に変えることができるか?
凍結した2.6Bループ変換器,Ouro-RLTTで両質問を検証した。
論文 参考訳(メタデータ) (2026-07-20T22:40:36Z) - Assessing Sample Quality in Conditional Generation under Compositional Shift [34.24064416169904]
トレーニング分布のみを用いて条件付きサンプルを評価するために,サンプル単位の信頼スコアを開発した。
その結果,外挿世代間で有意な比較を再現できることが示唆された。
生体イメージングにおいて、選択されたサンプルは、実際の形態的構造をより良く保存し、下流予測性能を向上させる。
論文 参考訳(メタデータ) (2026-06-08T15:10:25Z) - Hacking Generative Perplexity: Why Unconditional Text Evaluation Needs Distributional Metrics [49.443264461057645]
拡散および連続フローベースの言語モデルは、言語モデリングに対する非自己回帰的な主要な代替手段として現れている。
両方のパラダイムの進歩は、生成的複雑度(gen-PPL)によって圧倒的に追跡される。
我々は、この指標は正しくないと主張している。構築により、gen-PPLは、文法性やセマンティックコヒーレンスではなく、スコアARの下でのみ予測可能性を測定する。
論文 参考訳(メタデータ) (2026-06-07T02:35:56Z) - Let the Results Speak: A Replication-First Paradigm for LLM Behavioral Benchmarking [22.825786049667602]
本稿では,1つのヒト・ラタのコンセンサスに有効性を確保するために,複製第一パラダイムを提案する。
楽器を4つの特性で認証する - Kランの信頼性、アーキテクチャ的に異なる審査員間のクロスインストラクトレプリケーション、以前のトレーニングコホートからの審査員による歴史的フットプリントキャリブレーション、事前登録された予測。
本研究は, 自己発達型データ駆動による情緒的伴奏で, 次元は事前に決められず, 手順は9次元に安定化する。
論文 参考訳(メタデータ) (2026-05-27T03:41:11Z) - The Confidence Gate Theorem: When Should Ranked Decision Systems Abstain? [0.0]
ランク付けされた決定システムは、いつランク付けされたアウトプットに介入するか、いつ停止するかを判断しなければならない。
信頼に基づく棄権が意思決定の質を単調に改善し、いつ失敗するかを考察する。
論文 参考訳(メタデータ) (2026-03-10T17:44:10Z) - Detecting Unobserved Confounders: A Kernelized Regression Approach [46.52607207396279]
Kernel Regression Confounder Detection (KRCD) は、単一環境下での非線形観測データにおける観測不能なコンバウンディングを検出する新しい方法である。
ゼロからの有意な偏差が観測不能な共起を示すテスト統計学。
合成ベンチマークとツインズデータセットの実験は、KRCDが既存のベースラインを上回るだけでなく、計算効率も優れていることを示した。
論文 参考訳(メタデータ) (2026-01-01T04:26:02Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。