論文の概要: Bayesian Optimization for Policy Search in High-Dimensional Systems via
Automatic Domain Selection
- arxiv url: http://arxiv.org/abs/2001.07394v1
- Date: Tue, 21 Jan 2020 09:04:15 GMT
- ステータス: 処理完了
- システム内更新日: 2023-01-08 00:37:14.985548
- Title: Bayesian Optimization for Policy Search in High-Dimensional Systems via
Automatic Domain Selection
- Title(参考訳): 自動ドメイン選択による高次元システムのポリシー探索のためのベイズ最適化
- Authors: Lukas P. Fr\"ohlich, Edgar D. Klenske, Christian G. Daniel, Melanie N.
Zeilinger
- Abstract要約: 我々は,BOを高次元制御タスクに拡張するために,最適制御による結果を活用することを提案する。
BO問題を単純化するために,学習したダイナミクスモデルをモデルベースコントローラと組み合わせて利用する方法を示す。
本報告では,クワッドコプターの48次元ポリシを含む実ハードウェアおよびシミュレーションタスクについて実験的に評価する。
- 参考スコア(独自算出の注目度): 1.1240669509034296
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Bayesian Optimization (BO) is an effective method for optimizing
expensive-to-evaluate black-box functions with a wide range of applications for
example in robotics, system design and parameter optimization. However, scaling
BO to problems with large input dimensions (>10) remains an open challenge. In
this paper, we propose to leverage results from optimal control to scale BO to
higher dimensional control tasks and to reduce the need for manually selecting
the optimization domain. The contributions of this paper are twofold: 1) We
show how we can make use of a learned dynamics model in combination with a
model-based controller to simplify the BO problem by focusing onto the most
relevant regions of the optimization domain. 2) Based on (1) we present a
method to find an embedding in parameter space that reduces the effective
dimensionality of the optimization problem. To evaluate the effectiveness of
the proposed approach, we present an experimental evaluation on real hardware,
as well as simulated tasks including a 48-dimensional policy for a quadcopter.
- Abstract(参考訳): ベイズ最適化 (bayesian optimization, bo) は、ロボティクス、システム設計、パラメータ最適化など、幅広いアプリケーションを用いて、費用対評価ブラックボックス関数を最適化する効果的な方法である。
しかし、大きな入力次元 (>10) を持つ問題へのboのスケーリングは、まだ未解決の課題である。
本稿では,boをスケールする最適制御から高次元制御タスクへの結果を活用し,最適化領域を手作業で選択する必要性を低減することを提案する。
この論文の貢献は2つある。
1) 最適化領域の最も関連する領域に焦点をあてることで,bo問題を単純化するモデルベースコントローラと組み合わせることで,学習したダイナミクスモデルをどのように利用できるかを示す。
2)(1)最適化問題の有効次元を減少させるパラメータ空間への埋め込みを探索する手法を提案する。
提案手法の有効性を評価するため,実機上での実験的な評価と,クワッドコプターの48次元ポリシを含むシミュレーションタスクを提案する。
関連論文リスト
- Adaptive Bayesian Optimization for High-Precision Motion Systems [2.073673208115137]
低レベル制御パラメータをオンラインチューニングすることで、適応制御のためのリアルタイム純粋データ駆動モデルフリーアプローチを提案する。
我々は安全かつサンプル効率のよいベイズ最適化アルゴリズムであるGoOSEをベースとした。
半導体産業に応用した実精度運動システムにおけるアルゴリズムの性能評価を行った。
論文 参考訳(メタデータ) (2024-04-22T21:58:23Z) - Enhanced Bayesian Optimization via Preferential Modeling of Abstract
Properties [49.351577714596544]
本研究では,非測定抽象特性に関する専門家の嗜好を代理モデルに組み込むための,人間とAIの協調型ベイズフレームワークを提案する。
優先判断において、誤った/誤解を招く専門家バイアスを処理できる効率的な戦略を提供する。
論文 参考訳(メタデータ) (2024-02-27T09:23:13Z) - High-dimensional Bayesian Optimization with Group Testing [7.12295305987761]
本研究では,高次元領域における効率的な最適化を容易にするために,能動変数を同定するグループテスト手法を提案する。
提案したアルゴリズムであるグループテストベイズ最適化(GTBO)は、まず変数のグループを体系的に選択し、テストするテストフェーズを実行する。
第2段階では、GTBOは活性次元をより重要視することで最適化を導く。
論文 参考訳(メタデータ) (2023-10-05T12:52:27Z) - Predictive Modeling through Hyper-Bayesian Optimization [60.586813904500595]
本稿では,モデル選択とBOを統合する新しい手法を提案する。
このアルゴリズムは、モデル空間のBOと関数空間のBOの間を行き来する。
サンプル効率の改善に加えて、ブラックボックス機能に関する情報も出力する。
論文 参考訳(メタデータ) (2023-08-01T04:46:58Z) - Learning Regions of Interest for Bayesian Optimization with Adaptive
Level-Set Estimation [84.0621253654014]
本稿では,高信頼領域を適応的にフィルタするBALLETというフレームワークを提案する。
理論的には、BALLETは探索空間を効率的に縮小することができ、標準BOよりも厳密な後悔を示すことができる。
論文 参考訳(メタデータ) (2023-07-25T09:45:47Z) - Scalable Bayesian optimization with high-dimensional outputs using
randomized prior networks [3.0468934705223774]
本稿では,確率化された先行するニューラルネットワークの自己ストラップ型アンサンブルに基づくBOとシーケンシャル意思決定のためのディープラーニングフレームワークを提案する。
提案手法は,高次元ベクトル空間や無限次元関数空間の値を取る場合においても,設計変数と関心量の関数的関係を近似することができることを示す。
提案手法をBOの最先端手法に対して検証し,高次元出力の課題に対して優れた性能を示す。
論文 参考訳(メタデータ) (2023-02-14T18:55:21Z) - Towards Automated Design of Bayesian Optimization via Exploratory
Landscape Analysis [11.143778114800272]
AFの動的選択はBO設計に有用であることを示す。
我々は,オートML支援のオンザフライBO設計への道を開き,その動作をランニング・バイ・ランで調整する。
論文 参考訳(メタデータ) (2022-11-17T17:15:04Z) - Computationally Efficient High-Dimensional Bayesian Optimization via
Variable Selection [0.5439020425818999]
本稿では,変数選択を利用した計算効率の高い高次元BO法を提案する。
提案手法では,選択変数を含む空間を軸整列した部分空間を自動的に学習することができる。
我々は,いくつかの合成および実問題に対する本手法の有効性を実証的に示す。
論文 参考訳(メタデータ) (2021-09-20T01:55:43Z) - Conservative Objective Models for Effective Offline Model-Based
Optimization [78.19085445065845]
計算設計の問題は、合成生物学からコンピュータアーキテクチャまで、様々な場面で発生している。
本研究では,分布外入力に対する接地的目標の実際の値を低くする目的関数のモデルを学習する手法を提案する。
COMは、様々なMBO問題に対して、既存のメソッドの実装と性能の面では単純である。
論文 参考訳(メタデータ) (2021-07-14T17:55:28Z) - Optimizing Large-Scale Hyperparameters via Automated Learning Algorithm [97.66038345864095]
ゼロ階超勾配(HOZOG)を用いた新しいハイパーパラメータ最適化法を提案する。
具体的には、A型制約最適化問題として、まずハイパーパラメータ最適化を定式化する。
次に、平均ゼロ階超勾配を用いてハイパーパラメータを更新する。
論文 参考訳(メタデータ) (2021-02-17T21:03:05Z) - Bayesian Optimization for Selecting Efficient Machine Learning Models [53.202224677485525]
本稿では,予測効率とトレーニング効率の両面において,モデルを協調最適化するための統一ベイズ最適化フレームワークを提案する。
レコメンデーションタスクのためのモデル選択の実験は、この方法で選択されたモデルがモデルのトレーニング効率を大幅に改善することを示している。
論文 参考訳(メタデータ) (2020-08-02T02:56:30Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。