論文の概要: MPI: Evaluating and Inducing Personality in Pre-trained Language Models
- arxiv url: http://arxiv.org/abs/2206.07550v1
- Date: Fri, 20 May 2022 07:32:57 GMT
- ステータス: 処理完了
- システム内更新日: 2022-06-20 01:57:00.439476
- Title: MPI: Evaluating and Inducing Personality in Pre-trained Language Models
- Title(参考訳): MPI:事前訓練された言語モデルにおけるパーソナリティの評価と誘導
- Authors: Guangyuan Jiang, Manjie Xu, Song-Chun Zhu, Wenjuan Han, Chi Zhang,
Yixin Zhu
- Abstract要約: 本稿では,マシンパーソナリティ・インベントリ(MPI)データセットを提案する。
MPIを用いてモデルを評価することにより、事前学習された言語モデルにおけるパーソナリティの存在を示す最初の証拠を提供する。
我々は,特定の個性を持つ言語モデルを制御可能な方法で誘導するチェイン・プロンプト法を考案した。
- 参考スコア(独自算出の注目度): 85.86266352122209
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Originated as a philosophical quest, personality discerns how individuals
differ from each other in terms of thinking, feeling, and behaving. Towards
building social machines that work with humans on a daily basis, we are
motivated to ask: (1) Do existing pre-trained language models possess
personality, akin to their human counterpart? If so, (2) how can we evaluate
them? Further, given this evaluation framework, (3) how can we induce a certain
personality in a fully controllable fashion? To tackle these three questions,
we propose the Machine Personality Inventory (MPI) dataset for evaluating the
machine personality; MPI follows standardized personality tests, built upon the
Big Five Personality Factors (Big Five) theory and personality assessment
inventories. By evaluating models with MPI, we provide the first piece of
evidence showing the existence of personality in pre-trained language models.
We further devise a Chain Prompting method to induce the language model with a
specific personality in a controllable manner, capable of producing diversified
behaviors. We hope to shed light on future studies by adopting personality as
the essential psychological guidance for various downstream tasks, building
more human-like and in situ dialogue agents.
- Abstract(参考訳): 哲学的な探求として始まり、個性は思考、感覚、行動の点で個人がどう異なるかを明らかにする。
人間と日常的に連携するソーシャルマシンの構築に向けて,(1)既存の事前学習済み言語モデルは,人間と同じような個性を持つか?
もしそうなら、(2)どうやって評価できるのか?
さらに、この評価枠組みを前提として、(3)完全に制御可能な方法で特定の個性をいかに誘導できるか。
これらの3つの疑問に対処するために,機械パーソナリティ・インベントリ(MPI)データセットを提案する。MPIは,ビッグファイブ・パーソナリティ・ファクター(Big Five Personality Factors, ビッグファイブ・パーソナリティ・ファクター)理論とパーソナリティ・アセスメント・インベントリに基づいて,標準化されたパーソナリティ・テストに従う。
MPIを用いてモデルを評価することにより、事前学習された言語モデルにおけるパーソナリティの存在を示す最初の証拠を提供する。
さらに,特定の個性を持つ言語モデルを制御可能な方法で誘導し,多様な振る舞いを生成できるチェーン・プロンプト法を考案する。
我々は、さまざまな下流業務にパーソナリティを必須の心理的ガイダンスとして採用し、より人間的な対話エージェントを構築し、今後の研究に光を当てたい。
関連論文リスト
- Do LLM Personas Dream of Bull Markets? Comparing Human and AI Investment Strategies Through the Lens of the Five-Factor Model [0.3495246564946556]
大きな言語モデル(LLM)は、人格を採用し、人間のように振る舞う能力を示している。
本研究は,人格特性が同一である人間と類似した,特定の5つの人格プロファイルを持つLLMペルソナが投資業務を行うか否かを検討した。
LLMは, 学習スタイル, 衝動性, リスク食欲という3つの領域において, 特性を予測行動に一般化することができることがわかった。
論文 参考訳(メタデータ) (2024-10-28T02:50:41Z) - LMLPA: Language Model Linguistic Personality Assessment [11.599282127259736]
大規模言語モデル(LLM)は、日常の生活や研究にますます利用されている。
与えられたLLMの性格を測定することは、現在課題である。
言語モデル言語パーソナリティアセスメント(LMLPA)は,LLMの言語的パーソナリティを評価するシステムである。
論文 参考訳(メタデータ) (2024-10-23T07:48:51Z) - Neuron-based Personality Trait Induction in Large Language Models [115.08894603023712]
大規模言語モデル (LLM) は、様々な性格特性をシミュレートする能力が増している。
LLMにおけるパーソナリティ特性誘導のためのニューロンに基づくアプローチを提案する。
論文 参考訳(メタデータ) (2024-10-16T07:47:45Z) - Quantifying AI Psychology: A Psychometrics Benchmark for Large Language Models [57.518784855080334]
大きな言語モデル(LLM)は例外的なタスク解決能力を示しており、人間に似た役割を担っている。
本稿では,LLMにおける心理学的次元を調査するための枠組みとして,心理学的識別,評価データセットのキュレーション,結果検証による評価について述べる。
本研究では,個性,価値観,感情,心の理論,モチベーション,知性の6つの心理学的側面を網羅した総合的心理測定ベンチマークを導入する。
論文 参考訳(メタデータ) (2024-06-25T16:09:08Z) - Is Cognition and Action Consistent or Not: Investigating Large Language
Model's Personality [12.162460438332152]
本研究では,人格質問紙に対する回答を通じて,人格特性の証明における言語モデル(LLM)の信頼性について検討した。
我々のゴールは、LLMの人格傾向と実際の「行動」との整合性を評価することである。
本研究では,心理学的理論とメトリクスに基づく観察結果の仮説を提案する。
論文 参考訳(メタデータ) (2024-02-22T16:32:08Z) - Illuminating the Black Box: A Psychometric Investigation into the
Multifaceted Nature of Large Language Models [3.692410936160711]
本研究では,AIパーソナリティやAInalityの概念を探求し,Large Language Models(LLM)が人間のパーソナリティに似たパターンを示すことを示唆する。
プロジェクティブテストを用いて,直接質問を通じて容易にはアクセスできないLLM個性の隠れた側面を明らかにする。
機械学習解析の結果,LSMは異なるAinality特性を示し,多様な性格型を示し,外的指示に応答して動的に変化を示すことが明らかとなった。
論文 参考訳(メタデータ) (2023-12-21T04:57:21Z) - PsyCoT: Psychological Questionnaire as Powerful Chain-of-Thought for
Personality Detection [50.66968526809069]
PsyCoTと呼ばれる新しい人格検出手法を提案する。これは、個人がマルチターン対話方式で心理的質問を完遂する方法を模倣するものである。
実験の結果,PsyCoTは人格検出におけるGPT-3.5の性能とロバスト性を大幅に向上させることがわかった。
論文 参考訳(メタデータ) (2023-10-31T08:23:33Z) - Revisiting the Reliability of Psychological Scales on Large Language Models [62.57981196992073]
本研究の目的は,大規模言語モデルにパーソナリティアセスメントを適用することの信頼性を明らかにすることである。
GPT-3.5、GPT-4、Gemini-Pro、LLaMA-3.1などのモデル毎の2,500設定の分析により、様々なLCMがビッグファイブインベントリに応答して一貫性を示すことが明らかになった。
論文 参考訳(メタデータ) (2023-05-31T15:03:28Z) - Machine Psychology [54.287802134327485]
我々は、心理学にインスパイアされた行動実験において、研究のための実りある方向が、大きな言語モデルに係わっていると論じる。
本稿では,本手法が表に示す理論的視点,実験パラダイム,計算解析技術について述べる。
これは、パフォーマンスベンチマークを超えた、生成人工知能(AI)のための「機械心理学」の道を開くものだ。
論文 参考訳(メタデータ) (2023-03-24T13:24:41Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。