論文の概要: Infinite use of finite means: Zero-Shot Generalization using
Compositional Emergent Protocols
- arxiv url: http://arxiv.org/abs/2012.05011v2
- Date: Sun, 13 Dec 2020 04:19:33 GMT
- ステータス: 処理完了
- システム内更新日: 2021-05-16 02:16:18.943350
- Title: Infinite use of finite means: Zero-Shot Generalization using
Compositional Emergent Protocols
- Title(参考訳): 有限手段の無限利用:合成創発プロトコルを用いたゼロショット一般化
- Authors: Rishi Hazra, Sonu Dixit, Sayambhu Sen
- Abstract要約: 学習エージェントに内在的な報酬を活用し,外部からのフィードバックがなければ構成性を誘発できることを示す。
2Dグリッド環境での接地言語獲得を調査するためのプラットフォームであるComm-gSCANを紹介します。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Human language has been described as a system that makes use of finite means
to express an unlimited array of thoughts. Of particular interest is the aspect
of compositionality, whereby, the meaning of a complex, compound language
expression can be deduced from the meaning of its constituent parts. If
artificial agents can develop compositional communication protocols akin to
human language, they can be made to seamlessly generalize to unseen
combinations. However, the real question is, how do we induce compositionality
in emergent communication? Studies have recognized the role of curiosity in
enabling linguistic development in children. It is this same intrinsic urge
that drives us to master complex tasks with decreasing amounts of explicit
reward. In this paper, we seek to use this intrinsic feedback in inducing a
systematic and unambiguous protolanguage in artificial agents. We show in our
experiments, how these rewards can be leveraged in training agents to induce
compositionality in absence of any external feedback. Additionally, we
introduce Comm-gSCAN, a platform for investigating grounded language
acquisition in 2D-grid environments. Using this, we demonstrate how
compositionality can enable agents to not only interact with unseen objects,
but also transfer skills from one task to other in zero-shot (Can an agent,
trained to pull and push twice, pull twice?)
- Abstract(参考訳): 人間の言語は有限の手段を使って無限の思考を表現するシステムとして説明されてきた。
特に興味深いのは構成性の側面であり、複雑な複合言語表現の意味はその構成部分の意味から導出することができる。
人工エージェントが人間の言語に似た構成的コミュニケーションプロトコルを開発できれば、目に見えない組み合わせにシームレスに一般化することができる。
しかし、真の疑問は、創発的コミュニケーションにおいて構成性をどのように誘発するかである。
研究は、好奇心が子どもの言語発達に果たす役割を認識している。
明示的な報酬の量を減らすことで複雑なタスクをマスターするのと同じ本質的な衝動です。
本稿では,この内在的なフィードバックを,人工エージェントにおける体系的かつあいまいな原語誘導に活用する。
実験では、外部からのフィードバックがなければ、これらの報酬をトレーニングエージェントに活用して構成性を誘導する方法を示します。
さらに,2次元グリッド環境における接地言語習得のためのプラットフォームであるComm-gSCANを紹介する。
これを利用することで、エージェントが知覚されないオブジェクトと対話できるだけでなく、ゼロショットでひとつのタスクから別のタスクにスキルを移すことができる(エージェントは2回引く訓練を受け、2回引くことができるか?
関連論文リスト
- A Complexity-Based Theory of Compositionality [53.025566128892066]
AIでは、構成表現は配布外一般化の強力な形式を可能にすることができる。
ここでは、構成性に関する直観を考慮し、拡張する構成性の公式な定義を提案する。
この定義は概念的には単純で量的であり、アルゴリズム情報理論に基礎を置いており、あらゆる表現に適用できる。
論文 参考訳(メタデータ) (2024-10-18T18:37:27Z) - tagE: Enabling an Embodied Agent to Understand Human Instructions [3.943519623674811]
我々は, Embodied Agent (tagE) のためのタスク・アンド・引数・グラウンドティング(タスク・アンド・引数・グラウンドディング)と呼ばれる新しいシステムを導入する。
本システムでは,自然言語で表現された複雑なタスク命令から一連のタスクを抽出するために,発明的なニューラルネットワークモデルを採用している。
提案モデルでは,入れ子デコードに富んだエンコーダ・デコーダ・フレームワークを用いて,複雑な命令からタスクとその引数を効果的に抽出する。
論文 参考訳(メタデータ) (2023-10-24T08:17:48Z) - Are Representations Built from the Ground Up? An Empirical Examination
of Local Composition in Language Models [91.3755431537592]
構成的・非構成的句を表現することは言語理解にとって重要である。
まず,より長いフレーズのLM-内部表現を,その構成成分から予測する問題を定式化する。
意味的構成性の人間の判断と相関する予測精度を期待するが、大部分はそうではない。
論文 参考訳(メタデータ) (2022-10-07T14:21:30Z) - Emergence of Machine Language: Towards Symbolic Intelligence with Neural
Networks [73.94290462239061]
本稿では、ニューラルネットワークを用いてシンボルとコネクショナリズムの原理を組み合わせることで、離散表現を導出することを提案する。
対話型環境とタスクを設計することにより、機械が自発的で柔軟でセマンティックな言語を生成できることを実証した。
論文 参考訳(メタデータ) (2022-01-14T14:54:58Z) - Few-shot Language Coordination by Modeling Theory of Mind [95.54446989205117]
我々は、数ショット$textit language coordinate$のタスクについて研究する。
リードエージェントは、言語能力の異なるエージェントの$textitpopulation$と調整する必要があります。
これは、人間のコミュニケーションの重要な構成要素であるパートナーの信念をモデル化する能力を必要とする。
論文 参考訳(メタデータ) (2021-07-12T19:26:11Z) - Emergent Communication of Generalizations [13.14792537601313]
共有された視覚的コンテキストにおける1つのオブジェクトのコミュニケーションは、過度に適合する傾向があり、具体的な参照を超えて、言語が役に立つことを奨励しない、と我々は主張する。
抽象的な視覚概念を表すオブジェクトの集合上での通信一般化を必要とするゲームを提案する。
これらのゲームは学習言語の体系性と解釈可能性を大幅に向上させる。
論文 参考訳(メタデータ) (2021-06-04T19:02:18Z) - Compositional Processing Emerges in Neural Networks Solving Math
Problems [100.80518350845668]
人工知能の最近の進歩は、大きなモデルが十分な言語データに基づいて訓練されると、文法構造が表現に現れることを示している。
我々は、この研究を数学的推論の領域にまで拡張し、どのように意味を構成するべきかについての正確な仮説を定式化することができる。
私たちの研究は、ニューラルネットワークがトレーニングデータに暗黙的に構造化された関係について何かを推測できるだけでなく、個々の意味の合成を合成全体へと導くために、この知識を展開できることを示している。
論文 参考訳(メタデータ) (2021-05-19T07:24:42Z) - Zero-Shot Generalization using Intrinsically Motivated Compositional
Emergent Protocols [0.0]
本稿では,エージェントが無意味なオブジェクトと対話するだけでなく,ゼロショット設定であるタスクから別のタスクへスキルを伝達できることを示す。
本研究では,エージェントが無意味なオブジェクトと対話できるだけでなく,ゼロショット設定であるタスクから別のタスクへスキルを伝達できることを示す。
論文 参考訳(メタデータ) (2021-05-11T14:20:26Z) - Emergence of Pragmatics from Referential Game between Theory of Mind
Agents [64.25696237463397]
エージェントが手書きのルールを指定せずに「行間を読む」能力を自発的に学習するアルゴリズムを提案する。
協調型マルチエージェント教育状況における心の理論(ToM)を統合し,適応型強化学習(RL)アルゴリズムを提案する。
論文 参考訳(メタデータ) (2020-01-21T19:37:33Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。