論文の概要: Novelty Search makes Evolvability Inevitable
- arxiv url: http://arxiv.org/abs/2005.06224v1
- Date: Wed, 13 May 2020 09:32:07 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-03 09:58:52.531428
- Title: Novelty Search makes Evolvability Inevitable
- Title(参考訳): ノベルティサーチによる進化可能性の回避
- Authors: Stephane Doncieux (ISIR), Giuseppe Paolo (ISIR), Alban Laflaqui\`ere,
Alexandre Coninx (ISIR)
- Abstract要約: 本研究では,ノベルティ探索が,有界な行動空間においても高い進化性を示す圧力を暗黙的に生み出すことを示す。
探索を通して,行動空間において非常に活発な個人に対して,新規性報酬の動的評価を行うことが示されている。
- 参考スコア(独自算出の注目度): 62.997667081978825
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Evolvability is an important feature that impacts the ability of evolutionary
processes to find interesting novel solutions and to deal with changing
conditions of the problem to solve. The estimation of evolvability is not
straightforward and is generally too expensive to be directly used as selective
pressure in the evolutionary process. Indirectly promoting evolvability as a
side effect of other easier and faster to compute selection pressures would
thus be advantageous. In an unbounded behavior space, it has already been shown
that evolvable individuals naturally appear and tend to be selected as they are
more likely to invade empty behavior niches. Evolvability is thus a natural
byproduct of the search in this context. However, practical agents and
environments often impose limits on the reach-able behavior space. How do these
boundaries impact evolvability? In this context, can evolvability still be
promoted without explicitly rewarding it? We show that Novelty Search
implicitly creates a pressure for high evolvability even in bounded behavior
spaces, and explore the reasons for such a behavior. More precisely we show
that, throughout the search, the dynamic evaluation of novelty rewards
individuals which are very mobile in the behavior space, which in turn promotes
evolvability.
- Abstract(参考訳): 進化可能性(Evolvability)は、興味深い新しい解決策を見つけ、解決すべき問題の条件の変化に対処する進化過程の能力に影響を与える重要な特徴である。
進化可能性の推定は単純ではなく、一般的に進化過程において選択的な圧力として直接使われるには高価すぎる。
選択圧力を計算するのが簡単で高速な他の方法の副作用として間接的に進化性を促進することは有利である。
非有界な行動空間では、進化可能な個人が自然に現れ、空の行動ニッチに侵入する傾向があるため、選択される傾向があることが既に示されている。
したがって、進化可能性はこの文脈における探索の自然な副産物である。
しかし、実用的なエージェントや環境はしばしば到達可能な行動空間に制限を課す。
これらの境界は進化可能性にどのように影響するか?
この文脈では、進化性は明示的に報いることなく促進できますか?
我々は, 新規な探索が有界な行動空間においても高い進化可能性の圧力を暗黙的に生み出すことを示し, その原因を探究する。
より正確には、探索を通して、ノベルティの動的評価は、行動空間において非常に移動的な個人に報酬を与え、それによって進化性を促進することを示す。
関連論文リスト
- Evolving choice hysteresis in reinforcement learning: comparing the adaptive value of positivity bias and gradual perseveration [0.0]
多くの状況において, 肯定バイアスは進化的安定であり, 漸進的摂動の出現は体系的でなく, 頑健であることを示す。
以上の結果から, 環境特異的な方法で, バイアスが適応し, 進化によって選択できることが示唆された。
論文 参考訳(メタデータ) (2024-10-25T09:47:31Z) - Agent Alignment in Evolving Social Norms [65.45423591744434]
本稿では,エージェント進化とアライメントのための進化的フレームワークであるEvolutionaryAgentを提案する。
社会規範が継続的に進化する環境では、エージェントは現在の社会規範に適応し、生存と増殖の確率が高くなる。
進化的エージェントは、一般的なタスクにおいてその能力を維持しながら、進化する社会規範と徐々に整合できることを示す。
論文 参考訳(メタデータ) (2024-01-09T15:44:44Z) - Role of Morphogenetic Competency on Evolution [0.0]
進化計算において、逆関係(進化に関する知性の影響)は、生物レベルの振る舞いの観点からアプローチされる。
我々は、解剖学的形態空間をナビゲートするシステムの最小限のモデルの知性に焦点を当てる。
我々はシリコの標準遺伝アルゴリズムを用いて人工胚の個体群を進化させた。
論文 参考訳(メタデータ) (2023-10-13T11:58:18Z) - On Evolvability and Behavior Landscapes in Neuroevolutionary Divergent
Search [0.0]
進化性(Evolvability)とは、個々の遺伝子型が相互に多様な表現型を持つ子孫を産み出す能力である。
近年の研究では、発散探索法が選択的圧力を暗黙的に生成することで、進化性を促進することが示されている。
本稿では,神経進化的分岐探索と進化可能性の関係について,新しい視点を提供する。
論文 参考訳(メタデータ) (2023-06-16T13:46:55Z) - When to be critical? Performance and evolvability in different regimes
of neural Ising agents [18.536813548129878]
臨界状態に近い状態での操作は、自然、人工的およびそれらの進化システムにとって有益である、という仮説は長年にわたって仮説化されてきた。
我々はこの仮説を、ニューラルネットワークによって制御される進化的捕食エージェントのシステムでテストする。
驚くべきことに、ソリューションを発見するすべての人口は、亜臨界状態へと進化する。
論文 参考訳(メタデータ) (2023-03-28T17:57:57Z) - The Introspective Agent: Interdependence of Strategy, Physiology, and
Sensing for Embodied Agents [51.94554095091305]
本論では, 環境の文脈において, 自己能力を考慮した内省的エージェントについて論じる。
自然と同じように、私たちは戦略を1つのツールとして再編成して、環境において成功させたいと考えています。
論文 参考訳(メタデータ) (2022-01-02T20:14:01Z) - Adaptive Rational Activations to Boost Deep Reinforcement Learning [68.10769262901003]
我々は、合理的が適応可能なアクティベーション機能に適合する理由と、ニューラルネットワークへの含意が重要である理由を動機付けている。
人気アルゴリズムに(繰り返しの)アクティベーションを組み込むことで,アタリゲームにおいて一貫した改善がもたらされることを実証する。
論文 参考訳(メタデータ) (2021-02-18T14:53:12Z) - Embodied Intelligence via Learning and Evolution [92.26791530545479]
環境の複雑さが形態学的知能の進化を促進することを示す。
また、進化は速く学習する形態を素早く選択することを示した。
我々の実験は、ボールドウィン効果とモルフォロジーインテリジェンスの発生の両方の力学的基礎を示唆している。
論文 参考訳(メタデータ) (2021-02-03T18:58:31Z) - Ecological Reinforcement Learning [76.9893572776141]
このような条件下での学習を容易にする環境特性について検討する。
環境の特性が強化学習エージェントのパフォーマンスにどのように影響するかを理解することは、学習を魅力的にする方法でタスクを構造化するのに役立ちます。
論文 参考訳(メタデータ) (2020-06-22T17:55:03Z) - Mimicking Evolution with Reinforcement Learning [10.35437633064506]
人工的な人間のような知性を発達させる道は、自然のシミュレーションで進化の過程を模倣することでもたらされると我々は主張する。
この研究は、進化的リワード(EvER)を通じて進化的リワード(Evolutionary Reward)を提案する。
論文 参考訳(メタデータ) (2020-03-31T18:16:53Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。