論文の概要: Imperative Interference: Social Register Shapes Instruction Topology in Large Language Models
- arxiv url: http://arxiv.org/abs/2603.25015v1
- Date: Thu, 26 Mar 2026 04:25:14 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-03-27 20:52:48.096247
- Title: Imperative Interference: Social Register Shapes Instruction Topology in Large Language Models
- Title(参考訳): 命令的干渉:大規模言語モデルにおける社会的登録形態の教育的トポロジー
- Authors: Tony Mason,
- Abstract要約: システムは、英語で協力する命令をスペイン語で、同じ意味的内容で競合するが、反対の相互作用トポロジーで競合する。
この逆転は社会登録によって引き起こされることを示す。
命令的ムードで書かれた立憲AIの原則は、言語に依存したアライメントを生み出す可能性がある。
- 参考スコア(独自算出の注目度): 0.0
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: System prompt instructions that cooperate in English compete in Spanish, with the same semantic content, but opposite interaction topology. We present instruction-level ablation experiments across four languages and four models showing that this topology inversion is mediated by social register: the imperative mood carries different obligatory force across speech communities, and models trained on multilingual data have learned these conventions. Declarative rewriting of a single instruction block reduces cross-linguistic variance by 81% (p = 0.029, permutation test). Rewriting three of eleven imperative blocks shifts Spanish instruction topology from competitive to cooperative, with spillover effects on unrewritten blocks. These findings suggest that models process instructions as social acts, not technical specifications: "NEVER do X" is an exercise of authority whose force is language-dependent, while "X: disabled" is a factual description that transfers across languages. If register mediates instruction-following at inference time, it plausibly does so during training. We state this as a testable prediction: constitutional AI principles authored in imperative mood may create language-dependent alignment. Corpus: 22 hand-authored probes against a production system prompt decomposed into 56 blocks.
- Abstract(参考訳): システムは、英語で協力する命令をスペイン語で、同じ意味的内容で競合するが、反対の相互作用トポロジーで競合する。
我々は,このトポロジの逆転が社会的レジスターによって媒介されることを示す4つの言語と4つのモデルに対して,命令レベルのアブレーション実験を行った。
単一命令ブロックの宣言的な書き換えは、言語間差異を81%減少させる(p = 0.029, permutation test)。
11の命令ブロックのうち3つの書き換えは、スペインの命令トポロジを競合から協力にシフトさせ、未書きブロックに余分な影響を与える。
NEVER do X" は言語に依存した権限の行使であり、"X: disabled" は言語間で伝達する事実記述である。
レジスタが推論時に命令追従を仲介するなら、それはトレーニング中に確実に行う。
命令的ムードで書かれた立憲AIの原則は、言語に依存したアライメントを生み出す可能性がある。
コーパス: 生産システムに対する22の手で認可されたプローブは、すぐに56ブロックに分解される。
関連論文リスト
- A Case Against Implicit Standards: Homophone Normalization in Machine Translation for Languages that use the Ge'ez Script [3.5149312379702127]
音声正規化(Homophone normalization)は、Amharic Natural Language Processingの文献に適用される事前処理のステップである。
トレーニングデータの代わりにモデル予測に正規化を適用した推論後介入を提案する。
我々の研究は、技術に精通した言語変化に関する広範な議論に寄与し、より多くの言語対応の介入を求めている。
論文 参考訳(メタデータ) (2025-07-20T22:35:08Z) - Training Neural Networks as Recognizers of Formal Languages [87.06906286950438]
ニューラルネットワークを文字列のバイナリ分類器として直接訓練し評価する。
3つのニューラルアーキテクチャに対して、チョムスキー階層の様々な言語について結果を提供する。
我々の貢献は、将来の研究において、言語認識の主張を理論的に健全に検証するのに役立つだろう。
論文 参考訳(メタデータ) (2024-11-11T16:33:25Z) - The Problem of Alignment [1.2277343096128712]
大規模言語モデルは、大きなコーパスから統計的パターンとして学習されたシーケンスを生成する。
最初のトレーニングモデルが人間の価値観と一致しなくてはならない場合、他のモデルよりも一定の継続が望ましい。
ユーザとモデル間の双方向インタラクションとして,この構造化の実践について検討する。
論文 参考訳(メタデータ) (2023-12-30T11:44:59Z) - APOLLO: A Simple Approach for Adaptive Pretraining of Language Models
for Logical Reasoning [73.3035118224719]
本稿では,論理的推論能力を改善した適応事前学習型言語モデルAPOLLOを提案する。
APOLLOはReClorで比較可能であり、LogiQAでベースラインを上回ります。
論文 参考訳(メタデータ) (2022-12-19T07:40:02Z) - VECO: Variable and Flexible Cross-lingual Pre-training for Language
Understanding and Generation [77.82373082024934]
我々はTransformerエンコーダにクロスアテンションモジュールを挿入し、言語間の相互依存を明確に構築する。
独自の言語でコンテキストにのみ条件付けされたマスク付き単語の予測の退化を効果的に回避することができる。
提案した言語間モデルでは,XTREMEベンチマークのさまざまな言語間理解タスクに対して,最先端の新たな結果が提供される。
論文 参考訳(メタデータ) (2020-10-30T03:41:38Z) - Constructing a Family Tree of Ten Indo-European Languages with
Delexicalized Cross-linguistic Transfer Patterns [57.86480614673034]
我々は,デレクシカル化転送を,解釈可能なツリー・ツー・ストリングパターンとツリー・ツー・ツリーパターンとして定式化する。
これにより、言語間移動を定量的に探索し、第二言語習得の問い合わせを拡張することができる。
論文 参考訳(メタデータ) (2020-07-17T15:56:54Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。