論文の概要: Exploring Zero-Shot Emergent Communication in Embodied Multi-Agent
Populations
- arxiv url: http://arxiv.org/abs/2010.15896v2
- Date: Thu, 3 Dec 2020 07:45:05 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-01 23:28:14.647347
- Title: Exploring Zero-Shot Emergent Communication in Embodied Multi-Agent
Populations
- Title(参考訳): マルチエージェント集団におけるゼロショット創発的コミュニケーションの探索
- Authors: Kalesha Bullard, Franziska Meier, Douwe Kiela, Joelle Pineau, and
Jakob Foerster
- Abstract要約: 本研究では,3次元環境下で関節を作動させることでコミュニケーションを学ぶエージェントについて検討する。
現実的な仮定、意図の非一様分布、共通知識エネルギーコストにおいて、これらのエージェントは新規パートナーに一般化するプロトコルを見つけることができることを示す。
- 参考スコア(独自算出の注目度): 59.608216900601384
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Effective communication is an important skill for enabling information
exchange and cooperation in multi-agent settings. Indeed, emergent
communication is now a vibrant field of research, with common settings
involving discrete cheap-talk channels. One limitation of this setting is that
it does not allow for the emergent protocols to generalize beyond the training
partners. Furthermore, so far emergent communication has primarily focused on
the use of symbolic channels. In this work, we extend this line of work to a
new modality, by studying agents that learn to communicate via actuating their
joints in a 3D environment. We show that under realistic assumptions, a
non-uniform distribution of intents and a common-knowledge energy cost, these
agents can find protocols that generalize to novel partners. We also explore
and analyze specific difficulties associated with finding these solutions in
practice. Finally, we propose and evaluate initial training improvements to
address these challenges, involving both specific training curricula and
providing the latent feature that can be coordinated on during training.
- Abstract(参考訳): 効果的なコミュニケーションは,マルチエージェント環境での情報交換と協調を可能にする上で重要なスキルである。
実際、創発的コミュニケーションは今や活発な研究分野であり、個別の安価トークチャネルを含む共通の設定がある。
この設定の1つの制限は、緊急プロトコルがトレーニングパートナーを超えて一般化できないことである。
さらに、これまでの創発的な通信は主にシンボリックチャネルの使用に焦点が当てられている。
本研究では,3次元環境において関節を作動させることでコミュニケーションを学ぶエージェントの研究を通じて,この作業ラインを新たなモダリティへと拡張する。
現実的な仮定、意図の非一様分布、共通知識エネルギーコストにおいて、これらのエージェントは新規パートナーに一般化するプロトコルを見つけることができる。
また、実際にこれらのソリューションを見つけることに関連する特定の困難を探索し分析する。
最後に,これらの課題に対処するための初期トレーニング改善の提案と評価を行い,具体的なトレーニングカリキュラムと,トレーニング中に調整可能な潜在機能の提供について述べる。
関連論文リスト
- Communication Learning in Multi-Agent Systems from Graph Modeling Perspective [62.13508281188895]
本稿では,エージェント間の通信アーキテクチャを学習可能なグラフとして概念化する手法を提案する。
本稿では,各エージェントに対して時間的ゲーティング機構を導入し,ある時間に共有情報を受信するかどうかの動的決定を可能にする。
論文 参考訳(メタデータ) (2024-11-01T05:56:51Z) - Learning Multi-Agent Communication from Graph Modeling Perspective [62.13508281188895]
本稿では,エージェント間の通信アーキテクチャを学習可能なグラフとして概念化する手法を提案する。
提案手法であるCommFormerは,通信グラフを効率よく最適化し,勾配降下によるアーキテクチャパラメータをエンドツーエンドで並列に洗練する。
論文 参考訳(メタデータ) (2024-05-14T12:40:25Z) - Learning Translations: Emergent Communication Pretraining for
Cooperative Language Acquisition [0.7832189413179361]
Emergent Communication (EC) エージェントは互いに通信することを学ぶが、彼らが開発するプロトコルはトレーニングコミュニティに特化している。
この観察は、訓練中に遭遇しないエージェントに対して堅牢なコミュニケーション戦略を学習するためのゼロショットコーディネーション(ZSC)の研究につながった。
本稿では,協調言語獲得問題(CLAP,Cooperative Language Acquisition Problem)と呼ばれる新たなAI課題を提案する。
論文 参考訳(メタデータ) (2024-02-26T02:13:36Z) - Will 6G be Semantic Communications? Opportunities and Challenges from
Task Oriented and Secure Communications to Integrated Sensing [49.83882366499547]
本稿では,マルチタスク学習を統合した次世代(NextG)ネットワークにおけるタスク指向およびセマンティックコミュニケーションの機会と課題について検討する。
我々は、送信側の専用エンコーダと受信側の複数のタスク固有のデコーダを表すディープニューラルネットワークを用いる。
トレーニングとテストの段階において、敵対的攻撃に起因する潜在的な脆弱性を精査する。
論文 参考訳(メタデータ) (2024-01-03T04:01:20Z) - From Explicit Communication to Tacit Cooperation:A Novel Paradigm for
Cooperative MARL [14.935456456463731]
本稿では,明示的なコミュニケーションから暗黙的な協調への段階的なシフトを促進する新しいパラダイムを提案する。
初期訓練段階では,エージェント間で関連情報を共有することで協力を促進する。
次に、明示的に伝達された情報と再構成された情報を組み合わせて混合情報を得る。
論文 参考訳(メタデータ) (2023-04-28T06:56:07Z) - On the Role of Emergent Communication for Social Learning in Multi-Agent
Reinforcement Learning [0.0]
社会学習は、専門家からのヒントを使って、異質なポリシーを整列し、サンプルの複雑さを減らし、部分的に観察可能なタスクを解決する。
本稿では,情報ボトルネックに基づく教師なし手法を提案する。
論文 参考訳(メタデータ) (2023-02-28T03:23:27Z) - Over-communicate no more: Situated RL agents learn concise communication
protocols [78.28898217947467]
互いに効果的に効率的にコミュニケーションできる人工エージェントをいかに設計するかは、不明である。
強化学習(RL)を用いたコミュニケーションの出現に関する研究
エージェントがコミュニケーションを行うための環境行為を強制しなければならない多段階タスクにおける位置的コミュニケーションについて検討する。
テストされたすべてのプレッシャーは過剰なコミュニケーションを阻害する可能性があるが、位置通信は最も効果的であり、努力のコストとは異なり、発生に悪影響を及ぼさない。
論文 参考訳(メタデータ) (2022-11-02T21:08:14Z) - The Enforcers: Consistent Sparse-Discrete Methods for Constraining
Informative Emergent Communication [5.432350993419402]
コミュニケーションは、エージェントが目標を達成するために協力することを可能にする。
疎間コミュニケーションの学習における最近の研究は、特に協調作業において、コミュニケーションの減少のコストが報酬の減少につながるような、高分散トレーニングに悩まされている。
本研究は、コミュニケーションの減少による報酬の損失を抑え、差別に対するペナルティを排除し、上記の課題に対処する。
論文 参考訳(メタデータ) (2022-01-19T07:31:06Z) - Quasi-Equivalence Discovery for Zero-Shot Emergent Communication [63.175848843466845]
ゼロショットコーディネーション(ZSC)を実現するための新しい問題設定と準等価探索アルゴリズムを提案する。
これらの2つの要因が参照ゲームにおいて一意に最適なZSCポリシーをもたらすことを示す。
QEDはこの設定における対称性を反復的に発見することができ、最適なZSCポリシーに収束する。
論文 参考訳(メタデータ) (2021-03-14T23:42:37Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。