論文の概要: Measuring Behavioural Signatures of Large Language Models through Psychometric Profiling
- arxiv url: http://arxiv.org/abs/2609.22934v1
- Date: Sat, 19 Sep 2026 10:21:32 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-09-22 20:29:00.589251
- Title: Measuring Behavioural Signatures of Large Language Models through Psychometric Profiling
- Title(参考訳): 心理学的プロファイリングによる大規模言語モデルの行動信号の測定
- Abstract要約: 大規模言語モデル(LLM)は、人間の決定とコミュニケーションをますます仲介するが、その行動規則性は特徴付けるのが困難である。
言語横断型心理学的プロファイリングフレームワークを開発し、7つの心理学的指標を用いて9つのLSMを評価する。
心理学的プロファイリングと答え可能性の統合分析は、デプロイメントレベルの振る舞いシグネチャを定量化するフレームワークを提供する。
- 参考スコア(独自算出の注目度): 16.420315923282548
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Large language models (LLMs) increasingly mediate human decisions and communication, yet their behavioural regularities remain difficult to characterize systematically. We develop a cross-linguistic psychometric profiling framework and evaluate nine LLMs using seven psychological instruments, with five repeated administrations per model and language in Chinese and English. Items unresolved after a prespecified retry procedure are retained as NA. Joint analysis of scored and NA responses captures response tendencies and boundaries of self-report applicability. LLMs exhibit structured, model-specific profiles despite a shared alignment-shaped pattern of higher prosocial and self-regulatory responses and lower dominance, disengagement and harmful-intent endorsement. NA responses are structured rather than uniformly distributed, indicating where outputs are treated as inapplicable, refused or cannot be mapped to valid response options. Language condition and provider origin are associated with profile configuration and answerability, whereas repeated administrations show high reproducibility and permit recovery of model identity. Human-reference and prompt-robustness analyses further indicate that these signatures are context dependent. Joint analysis of psychometric profiling and answerability offers a framework for quantifying deployment-level behavioural signatures.
- Abstract(参考訳): 大規模言語モデル(LLM)は、人間の決定とコミュニケーションをますます仲介するが、その行動規則性は体系的に特徴付けることは困難である。
言語横断型心理学的プロファイリングフレームワークを開発し、7つの心理学的指標を用いて9つのLSMを評価し、中国語と英語で1つのモデルと言語に対して5つの反復的な管理を行う。
所定の再試行手続き後に未解決の項目をNAとして保持する。
NA応答とNA応答の合同解析は、自己報告適用可能性の応答傾向と境界をキャプチャする。
LLMは、高い社会的および自己調節反応と低い支配、解離、有害なインテリジェンス支持の共有アライメント型のパターンにもかかわらず、構造化されたモデル固有のプロファイルを示す。
NA応答は均一な分散ではなく構造化されており、出力が適用不可能、拒否、あるいは有効な応答オプションにマッピングできないことを示す。
言語条件とプロバイダの起源はプロファイルの設定と応答可能性に関連付けられているのに対して、繰り返し行われる管理は再現性が高く、モデルのアイデンティティの回復を可能にする。
ヒューマン・リフレクションとプロンプト・ロバストネス分析は、これらのシグネチャが文脈に依存していることをさらに示している。
心理学的プロファイリングと答え可能性の統合分析は、デプロイメントレベルの振る舞いシグネチャを定量化するフレームワークを提供する。
関連論文リスト
- A Systematic Evaluation of Cross-Lingual Consistency Enhancement Methods in Multilingual Language Models [50.27606276000142]
本稿では,質問応答,推論時間介入,学習後アプローチにおける代表的CLC強調手法の統一評価について述べる。
その結果, 後学習法は一般に信頼性が高く, 直接分布アライメントはモデル・データセットの組み合わせ間で連続的にCLCを改善していることがわかった。
CLCの強化がモデルに異なる応答能力を与えるかどうかを考察する。
論文 参考訳(メタデータ) (2026-09-03T19:18:44Z) - Inference-Time Steering for Cross-Lingual Factual Consistency in LLMs [51.56484100374058]
大規模言語モデル(LLM)は目覚ましい多言語流布を示すが、その内部知識表現はハイリソース言語に対して不均等に偏っている。
我々は,これらのバイアスを推論時に緩和できるかどうかを考察し,対象言語でクエリされたかのように,英語の確率モデルに答えるように強制する。
Gemma 3 12Bの実験では、最も強い全体的な介入、効率性のバランス、安全性、ドメイン外の一般化を促すペルソナが明らかにされている。
論文 参考訳(メタデータ) (2026-07-21T16:15:05Z) - Behavioural Signatures of Risk-Sensitive Decision-Making in Large Language Models [121.70781851874035]
大規模言語モデル(LLM)は、意思決定支援にますます使われている。
不確実性の下での選択が安定かつ解釈可能な行動規則性を示すかどうかを理解することが重要である。
本稿では,無制限テキサスホールドエムに基づく制御型マルチモデルフレームワークを用いて,この問題について検討する。
論文 参考訳(メタデータ) (2026-07-11T10:33:39Z) - Overstating Attitudes, Ignoring Networks: LLM Biases in Simulating Misinformation Susceptibility [7.616305266104683]
大規模言語モデル (LLM) は、計算社会科学における人間の判断のためのプロキシとして、ますます使われている。
LLMを模擬した調査の回答者が、誤情報信念と共有の人間のパターンを再現できるかどうかを検証した。
論文 参考訳(メタデータ) (2026-02-04T15:48:05Z) - Toward Culturally Aligned LLMs through Ontology-Guided Multi-Agent Reasoning [6.102462703832761]
オントロジー誘導型マルチエージェント推論フレームワークであるOG-MARを提案する。
OG-MARは、World Values Survey (WVS)から応答性固有の値を要約している。
グローバルな文化的オントロジーを構築し、能力に関する質問を通じて、固定された分類に関する関係を導き出す。
推測時には、人口統計学的に類似したプロファイルを取得し、複数のバリューパーソナエージェントをインスタンス化する。
論文 参考訳(メタデータ) (2026-01-29T13:31:45Z) - The Linguistic Architecture of Reflective Thought: Evaluation of a Large Language Model as a Tool to Isolate the Formal Structure of Mentalization [0.0]
メンタライゼーションは認知的、感情的、他者間のコンポーネントを統合する。
大きな言語モデル(LLM)は、反射テキストを生成する能力の増大を示す。
論文 参考訳(メタデータ) (2025-11-20T23:51:34Z) - When Meaning Stays the Same, but Models Drift: Evaluating Quality of Service under Token-Level Behavioral Instability in LLMs [4.265831047857601]
本研究では,大規模言語モデルがトークンレベルでの認識のみが異なるが,同じ意味的意図を保持するプロンプトにどのように反応するかを検討する。
本稿では,意味論的に等価なプロンプトリワードの下でのLCMの挙動ドリフトを測定するための診断フレームワークであるPmpt-based Semantic Shift (PBSS)を提案する。
論文 参考訳(メタデータ) (2025-06-11T18:26:32Z) - Bring Your Own Data! Self-Supervised Evaluation for Large Language
Models [52.15056231665816]
大規模言語モデル(LLM)の自己教師型評価のためのフレームワークを提案する。
閉書知識,毒性,長期文脈依存性を測定するための自己指導型評価戦略を実証する。
自己監督評価と人監督評価との間には強い相関関係が認められた。
論文 参考訳(メタデータ) (2023-06-23T17:59:09Z) - Stateful Offline Contextual Policy Evaluation and Learning [88.9134799076718]
我々は、シーケンシャルデータから、政治以外の評価と学習について研究する。
動的パーソナライズされた価格設定などの問題の因果構造を形式化する。
本報告では,本クラスにおけるアウト・オブ・サンプル・ポリシーの性能改善について述べる。
論文 参考訳(メタデータ) (2021-10-19T16:15:56Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。