論文の概要: MindCraft: Theory of Mind Modeling for Situated Dialogue in
Collaborative Tasks
- arxiv url: http://arxiv.org/abs/2109.06275v1
- Date: Mon, 13 Sep 2021 19:26:19 GMT
- ステータス: 処理完了
- システム内更新日: 2021-09-16 06:27:12.781278
- Title: MindCraft: Theory of Mind Modeling for Situated Dialogue in
Collaborative Tasks
- Title(参考訳): MindCraft: 協調作業における仮定対話のためのマインドモデリングの理論
- Authors: Cristian-Paul Bara, Sky CH-Wang, Joyce Chai
- Abstract要約: 心の理論は、人間の協調とコミュニケーションの間、共通基盤を維持する上で重要な役割を担っている。
Minecraftの3D仮想ブロックの世界において、人間のペアが行う協調作業のきめ細かいデータセットを紹介した。
相互作用が展開するにつれて、パートナーの世界の信念と互いの信念をキャプチャする情報を提供する。
- 参考スコア(独自算出の注目度): 2.5725755841426623
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: An ideal integration of autonomous agents in a human world implies that they
are able to collaborate on human terms. In particular, theory of mind plays an
important role in maintaining common ground during human collaboration and
communication. To enable theory of mind modeling in situated interactions, we
introduce a fine-grained dataset of collaborative tasks performed by pairs of
human subjects in the 3D virtual blocks world of Minecraft. It provides
information that captures partners' beliefs of the world and of each other as
an interaction unfolds, bringing abundant opportunities to study human
collaborative behaviors in situated language communication. As a first step
towards our goal of developing embodied AI agents able to infer belief states
of collaborative partners in situ, we build and present results on
computational models for several theory of mind tasks.
- Abstract(参考訳): 人間の世界における自律エージェントの理想的な統合は、人間の言葉で協力できることを意味している。
特に心の理論は、人間同士のコラボレーションやコミュニケーションにおいて共通基盤を維持する上で重要な役割を果たしている。
そこで本稿では,マインクラフトの3d仮想ブロック世界において,被験者のペアが行う協調作業の細粒度データセットを提案する。
これは、パートナーの世界とお互いの信念を対話として捉える情報を提供し、位置する言語コミュニケーションにおける人間の協調行動を研究するための豊富な機会をもたらす。
協調パートナーの信念状態を推測できる具体的AIエージェントを開発するための第一歩として、いくつかの心的タスクの理論のための計算モデルを構築し、提示する。
関連論文リスト
- Mutual Theory of Mind in Human-AI Collaboration: An Empirical Study with LLM-driven AI Agents in a Real-time Shared Workspace Task [56.92961847155029]
心の理論(ToM)は、他人を理解する上で重要な能力として、人間の協調とコミュニケーションに大きな影響を及ぼす。
Mutual Theory of Mind (MToM) は、ToM能力を持つAIエージェントが人間と協力するときに発生する。
エージェントのToM能力はチームのパフォーマンスに大きな影響を与えず,エージェントの人間的理解を高めていることがわかった。
論文 参考訳(メタデータ) (2024-09-13T13:19:48Z) - Your Co-Workers Matter: Evaluating Collaborative Capabilities of Language Models in Blocks World [13.005764902339523]
2つのエージェントがそれぞれ独自の目標とスキルを持ち、ターゲット構造を一緒に構築するブロックワールド環境を設計する。
目標を達成するために、彼らは世界で行動し、自然言語でコミュニケーションすることができる。
パートナーの状態をモデル化し、実行エラーを特定し、修正するための中間的推論ステップを含む、チェーンオブ思想のプロンプトを採用しています。
論文 参考訳(メタデータ) (2024-03-30T04:48:38Z) - Building Cooperative Embodied Agents Modularly with Large Language
Models [104.57849816689559]
本研究では, 分散制御, 生の知覚観察, コストのかかるコミュニケーション, 様々な実施環境下でインスタンス化された多目的タスクといった課題に対処する。
我々は,LLMの常識知識,推論能力,言語理解,テキスト生成能力を活用し,認知に触発されたモジュラーフレームワークにシームレスに組み込む。
C-WAH と TDW-MAT を用いた実験により, GPT-4 で駆動される CoELA が, 強い計画に基づく手法を超越し, 創発的な効果的なコミュニケーションを示すことを示した。
論文 参考訳(メタデータ) (2023-07-05T17:59:27Z) - MindDial: Belief Dynamics Tracking with Theory-of-Mind Modeling for Situated Neural Dialogue Generation [62.44907105496227]
MindDialは、Mind-of-mindモデリングで位置決め自由形式の応答を生成できる、新しい対話型フレームワークである。
本研究では、話者の信念と話者の聴取者の信念を予測できる明示的なマインドモジュールを導入する。
筆者らのフレームワークは,提案手法と微調整モデルの両方に適用され,共通地盤アライメントとネゴシエーションの両方を含むシナリオで評価される。
論文 参考訳(メタデータ) (2023-06-27T07:24:32Z) - Towards Collaborative Plan Acquisition through Theory of Mind Modeling
in Situated Dialogue [10.233928711341825]
共同作業は、各パートナによる部分的なタスク知識と不完全な初期計画から始まることが多い。
本稿では,人間とエージェントが互いに学び,コミュニケーションを取ろうとする,協調的な計画獲得に向けた一歩を踏み出した。
エージェントが自分とパートナーのタスク知識の不足を、知覚と対話の豊富な履歴に基づいて予測するための新しい問題を定式化する。
論文 参考訳(メタデータ) (2023-05-18T19:42:04Z) - Human-guided Collaborative Problem Solving: A Natural Language based
Framework [74.27063862727849]
私たちのフレームワークは3つのコンポーネントで構成されています - 自然言語エンジンが言語発話を形式表現と逆変換に解析します。
このフレームワークが、Minecraftベースのブロックワールドドメインにおける協調的なビルディングタスクにおいて、協調的な問題解決の鍵となる課題に対処する能力について説明する。
論文 参考訳(メタデータ) (2022-07-19T21:52:37Z) - BOSS: A Benchmark for Human Belief Prediction in Object-context
Scenarios [14.23697277904244]
本稿では,人間と自律システム間の協調を促進させる手法を検討するために,心の理論(ToM)とオブジェクトコンテキスト関係(Object-Context Relations)の複合知識を利用する。
本稿では、人工知能(AI)システムによる、オブジェクトコンテキストシナリオにおける人間の信念状態の予測能力を評価するための、新しい、かつ挑戦的なマルチモーダルビデオデータセットを提案する。
論文 参考訳(メタデータ) (2022-06-21T18:29:17Z) - Few-shot Language Coordination by Modeling Theory of Mind [95.54446989205117]
我々は、数ショット$textit language coordinate$のタスクについて研究する。
リードエージェントは、言語能力の異なるエージェントの$textitpopulation$と調整する必要があります。
これは、人間のコミュニケーションの重要な構成要素であるパートナーの信念をモデル化する能力を必要とする。
論文 参考訳(メタデータ) (2021-07-12T19:26:11Z) - Joint Mind Modeling for Explanation Generation in Complex Human-Robot
Collaborative Tasks [83.37025218216888]
本稿では,人間とロボットのコラボレーションにおいて,人間のようなコミュニケーションを実現するための新しい説明可能なAI(XAI)フレームワークを提案する。
ロボットは、人間のユーザの階層的なマインドモデルを構築し、コミュニケーションの一形態として自身のマインドの説明を生成する。
その結果,提案手法はロボットの協調動作性能とユーザ認識を著しく向上させることがわかった。
論文 参考訳(メタデータ) (2020-07-24T23:35:03Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。