論文の概要: Tracking Emotions: Intrinsic Motivation Grounded on Multi-Level
Prediction Error Dynamics
- arxiv url: http://arxiv.org/abs/2007.14632v1
- Date: Wed, 29 Jul 2020 06:53:13 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-05 20:02:25.893831
- Title: Tracking Emotions: Intrinsic Motivation Grounded on Multi-Level
Prediction Error Dynamics
- Title(参考訳): 感情追跡:多レベル予測誤差ダイナミクスに基づく本質的動機付け
- Authors: Guido Schillaci and Alejandra Ciria and Bruno Lara
- Abstract要約: 目標達成に向けての進捗率と期待率の差が生じると、感情がどのように生じるかについて議論する。
自己生成的・動的目標に向けた行動を生成する本質的なモチベーションアーキテクチャを提案する。
- 参考スコア(独自算出の注目度): 68.8204255655161
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: How do cognitive agents decide what is the relevant information to learn and
how goals are selected to gain this knowledge? Cognitive agents need to be
motivated to perform any action. We discuss that emotions arise when
differences between expected and actual rates of progress towards a goal are
experienced. Therefore, the tracking of prediction error dynamics has a tight
relationship with emotions. Here, we suggest that the tracking of prediction
error dynamics allows an artificial agent to be intrinsically motivated to seek
new experiences but constrained to those that generate reducible prediction
error.We present an intrinsic motivation architecture that generates behaviors
towards self-generated and dynamic goals and that regulates goal selection and
the balance between exploitation and exploration through multi-level monitoring
of prediction error dynamics. This new architecture modulates exploration noise
and leverages computational resources according to the dynamics of the overall
performance of the learning system. Additionally, it establishes a possible
solution to the temporal dynamics of goal selection. The results of the
experiments presented here suggest that this architecture outperforms intrinsic
motivation approaches where exploratory noise and goals are fixed and a greedy
strategy is applied.
- Abstract(参考訳): 認知エージェントは、学習すべき情報と、この知識を得るための目標をどのように選択するかを決定するのか?
認知エージェントは、あらゆる行動を実行する動機付けが必要である。
目標達成に向けての進捗率と期待率の差が生じると感情が生じることを議論する。
したがって、予測誤差のダイナミクスの追跡は感情と密接な関係がある。
本稿では, 予測エラーダイナミクスの追跡により, 新たな体験を求めることができるが, 再現可能な予測エラーを発生させる要因に制約され, 予測エラーダイナミクスの多段階監視を通じて, 目標選択と活用と探索のバランスを調節する本質的なモチベーションアーキテクチャを提案する。
この新しいアーキテクチャは探索ノイズを変調し、学習システム全体のパフォーマンスのダイナミクスに応じて計算資源を活用する。
さらに、ゴール選択の時間的ダイナミクスに対する可能な解決策を確立する。
実験の結果,本アーキテクチャは探索ノイズや目標が固定され,欲求戦略が適用されるという本質的な動機づけアプローチよりも優れていたことが示唆された。
関連論文リスト
- Interpretable Imitation Learning with Dynamic Causal Relations [65.18456572421702]
得られた知識を有向非巡回因果グラフの形で公開することを提案する。
また、この因果発見プロセスを状態依存的に設計し、潜在因果グラフのダイナミクスをモデル化する。
提案するフレームワークは,動的因果探索モジュール,因果符号化モジュール,予測モジュールの3つの部分から構成され,エンドツーエンドで訓練される。
論文 参考訳(メタデータ) (2023-09-30T20:59:42Z) - Learning Goal-based Movement via Motivational-based Models in Cognitive
Mobile Robots [58.720142291102135]
人間は、強さと文脈に応じて行動を促進する必要がある。
また、各行動の知覚的快楽に関連する嗜好も作り出します。
これにより、意思決定がより複雑になり、コンテキストに応じてニーズと嗜好のバランスを取ることが求められます。
論文 参考訳(メタデータ) (2023-02-20T04:52:24Z) - Modelling human logical reasoning process in dynamic environmental
stress with cognitive agents [13.171768256928509]
本研究では,ドリフト拡散と深部強化学習を統合した認知エージェントを提案する。
21,157個の論理応答の大規模なデータセットを活用することで、動的ストレスのパフォーマンスへの影響を調査する。
定量的に、このフレームワークは、主観的および刺激特異的な行動差を捉えることにより、認知モデリングを改善する。
全体として、この研究は、動的文脈における人間の論理的推論プロセスのバガリーをシミュレートし、理解するための、強力でデータ駆動の方法論を示している。
論文 参考訳(メタデータ) (2023-01-15T23:46:37Z) - Intrinsic Motivation in Dynamical Control Systems [5.635628182420597]
エージェントのエンパワーメントの最大化に基づく本質的なモチベーションに対する情報理論的アプローチについて検討する。
このアプローチは、本質的なモチベーションを形式化する以前の試みを一般化することを示す。
これにより、実用的な人工的な本質的なモチベーションを持つコントローラーを設計するための扉が開く。
論文 参考訳(メタデータ) (2022-12-29T05:20:08Z) - Inference of Affordances and Active Motor Control in Simulated Agents [0.5161531917413706]
本稿では,出力確率,時間的予測,モジュール型人工ニューラルネットワークアーキテクチャを提案する。
我々のアーキテクチャは、割当マップと解釈できる潜在状態が発達していることを示す。
アクティブな推論と組み合わせることで、フレキシブルでゴール指向の動作が実行可能であることを示す。
論文 参考訳(メタデータ) (2022-02-23T14:13:04Z) - Backprop-Free Reinforcement Learning with Active Neural Generative
Coding [84.11376568625353]
動的環境におけるエラー(バックプロップ)のバックプロパゲーションを伴わない行動駆動型生成モデルの学習のための計算フレームワークを提案する。
我々は、まばらな報酬でも機能するインテリジェントエージェントを開発し、推論として計画の認知理論からインスピレーションを得ている。
我々のエージェントの堅牢な性能は、神経推論と学習のためのバックプロップフリーアプローチがゴール指向の行動を促進するという有望な証拠を提供する。
論文 参考訳(メタデータ) (2021-07-10T19:02:27Z) - Understanding the origin of information-seeking exploration in
probabilistic objectives for control [62.997667081978825]
探索と探索のトレードオフは適応行動の記述の中心である。
このトレードオフを解決する1つのアプローチは、エージェントが固有の「探索駆動」を持っていることを装備または提案することであった。
汎用的最大化と情報参照行動の組み合わせは, 目的の全く異なる分類の最小化から生じることを示す。
論文 参考訳(メタデータ) (2021-03-11T18:42:39Z) - Learning intuitive physics and one-shot imitation using
state-action-prediction self-organizing maps [0.0]
人間は探索と模倣によって学び、世界の因果モデルを構築し、両方を使って新しいタスクを柔軟に解決する。
このような特徴を生み出す単純だが効果的な教師なしモデルを提案する。
エージェントがアクティブな推論スタイルで柔軟に解決する、複数の関連するが異なる1ショットの模倣タスクに対して、その性能を示す。
論文 参考訳(メタデータ) (2020-07-03T12:29:11Z) - Intrinsic Motivation for Encouraging Synergistic Behavior [55.10275467562764]
スパース・リワード・シナジスティック・タスクにおける強化学習の探索バイアスとしての本質的モチベーションの役割について検討した。
私たちのキーとなる考え方は、シナジスティックなタスクにおける本質的なモチベーションのための優れた指針は、エージェントが自分自身で行動している場合、達成できない方法で世界に影響を与える行動を取ることである。
論文 参考訳(メタデータ) (2020-02-12T19:34:51Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。