論文の概要: Efficient Rollout Strategies for Bayesian Optimization
- arxiv url: http://arxiv.org/abs/2002.10539v3
- Date: Fri, 19 Jun 2020 03:40:36 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-29 02:33:56.837439
- Title: Efficient Rollout Strategies for Bayesian Optimization
- Title(参考訳): ベイズ最適化のための効率的なロールアウト戦略
- Authors: Eric Hans Lee, David Eriksson, Bolong Cheng, Michael McCourt, David
Bindel
- Abstract要約: ほとんどの獲得関数はミオピックであり、次の関数評価の影響のみを考慮することを意味する。
準モンテカルロ, 共通乱数, 制御変数の組み合わせはロールアウトの計算負担を著しく低減することを示した。
次に、ロールアウト獲得関数の最適化の必要性を排除したポリシー検索に基づくアプローチを定式化する。
- 参考スコア(独自算出の注目度): 15.050692645517998
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Bayesian optimization (BO) is a class of sample-efficient global optimization
methods, where a probabilistic model conditioned on previous observations is
used to determine future evaluations via the optimization of an acquisition
function. Most acquisition functions are myopic, meaning that they only
consider the impact of the next function evaluation. Non-myopic acquisition
functions consider the impact of the next $h$ function evaluations and are
typically computed through rollout, in which $h$ steps of BO are simulated.
These rollout acquisition functions are defined as $h$-dimensional integrals,
and are expensive to compute and optimize. We show that a combination of
quasi-Monte Carlo, common random numbers, and control variates significantly
reduce the computational burden of rollout. We then formulate a policy-search
based approach that removes the need to optimize the rollout acquisition
function. Finally, we discuss the qualitative behavior of rollout policies in
the setting of multi-modal objectives and model error.
- Abstract(参考訳): ベイズ最適化 (bayesian optimization, bo) は、先行観測に基づく確率モデルを用いて、獲得関数の最適化を通じて将来の評価を決定するための、サンプル効率の高い大域的最適化手法のクラスである。
ほとんどの獲得機能は近視的であり、次の機能評価の影響のみを考慮することを意味する。
非光学的取得関数は次の$h$関数の評価の影響を考慮し、通常ロールアウトによって計算され、BOの$h$ステップがシミュレートされる。
これらのロールアウト取得関数は$h$次元積分として定義され、計算と最適化に費用がかかる。
擬似モンテカルロ,共通乱数,制御変数の組み合わせにより,ロールアウトの計算負荷が大幅に低減することを示す。
次に、ロールアウト獲得関数の最適化の必要性を取り除くポリシー検索に基づくアプローチを定式化する。
最後に,マルチモーダル目標設定におけるロールアウトポリシーの質的挙動とモデル誤差について考察する。
関連論文リスト
- Differentiating Policies for Non-Myopic Bayesian Optimization [5.793371273485735]
本稿では,ロールアウト関数とその勾配を効率的に推定し,サンプリングポリシを実現する方法を示す。
本稿では,ロールアウト関数とその勾配を効率的に推定し,サンプリングポリシを実現する方法について述べる。
論文 参考訳(メタデータ) (2024-08-14T21:00:58Z) - Poisson Process for Bayesian Optimization [126.51200593377739]
本稿では、Poissonプロセスに基づくランキングベースの代理モデルを提案し、Poisson Process Bayesian Optimization(PoPBO)と呼ばれる効率的なBOフレームワークを提案する。
従来のGP-BO法と比較すると,PoPBOはコストが低く,騒音に対する堅牢性も良好であり,十分な実験により検証できる。
論文 参考訳(メタデータ) (2024-02-05T02:54:50Z) - Maximum-Likelihood Inverse Reinforcement Learning with Finite-Time
Guarantees [56.848265937921354]
逆強化学習(IRL)は報酬関数と関連する最適ポリシーを回復することを目的としている。
IRLの多くのアルゴリズムは本質的にネスト構造を持つ。
我々は、報酬推定精度を損なわないIRLのための新しいシングルループアルゴリズムを開発した。
論文 参考訳(メタデータ) (2022-10-04T17:13:45Z) - Generalizing Bayesian Optimization with Decision-theoretic Entropies [102.82152945324381]
統計的決定論の研究からシャノンエントロピーの一般化を考える。
まず,このエントロピーの特殊なケースがBO手順でよく用いられる獲得関数に繋がることを示す。
次に、損失に対する選択肢の選択が、どのようにして柔軟な獲得関数の族をもたらすかを示す。
論文 参考訳(メタデータ) (2022-10-04T04:43:58Z) - Batch Bayesian Optimization via Particle Gradient Flows [0.5735035463793008]
ブラックボックスとしてしか利用できない,あるいは評価に費用がかかる対象関数のグローバルな最適化方法を示す。
確率測度の空間上の多点予測確率に基づく新しい関数を構築する。
論文 参考訳(メタデータ) (2022-09-10T18:10:15Z) - On the development of a Bayesian optimisation framework for complex
unknown systems [11.066706766632578]
本稿では, ベイズ最適化アルゴリズムを様々な合成試験関数に対して実験的に検討し, 比較する。
取得関数の選択とトレーニングサンプル数,取得関数の正確な計算,モンテカルロに基づくアプローチについて検討する。
論文 参考訳(メタデータ) (2022-07-19T09:50:34Z) - A General Recipe for Likelihood-free Bayesian Optimization [115.82591413062546]
我々は,BOをより広範なモデルやユーティリティに拡張する可能性のないBO(LFBO)を提案する。
LFBOは、確率的代理モデルと個別に推論を行うことなく、取得関数を直接モデル化する。
LFBOにおける取得関数の計算は、重み付けされた分類問題を最適化することで削減できることを示す。
論文 参考訳(メタデータ) (2022-06-27T03:55:27Z) - Bayesian Optimization of Risk Measures [7.799648230758491]
我々は、$rho[F(x, W) ]$ という形の目的関数のベイズ最適化を考える。
目的関数の構造を利用してサンプリング効率を大幅に向上する新しいベイズ最適化アルゴリズム群を提案する。
論文 参考訳(メタデータ) (2020-07-10T18:20:46Z) - Global Optimization of Gaussian processes [52.77024349608834]
少数のデータポイントで学習したガウス過程を訓練した空間定式化を提案する。
このアプローチはまた、より小さく、計算的にもより安価なサブソルバを低いバウンディングに導く。
提案手法の順序の順序による時間収束を,総じて低減する。
論文 参考訳(メタデータ) (2020-05-21T20:59:11Z) - Incorporating Expert Prior in Bayesian Optimisation via Space Warping [54.412024556499254]
大きな探索空間では、アルゴリズムは関数の最適値に達する前に、いくつかの低関数値領域を通過する。
このコールドスタートフェーズの1つのアプローチは、最適化を加速できる事前知識を使用することである。
本稿では,関数の事前分布を通じて,関数の最適性に関する事前知識を示す。
先行分布は、探索空間を最適関数の高確率領域の周りに拡張し、最適関数の低確率領域の周りに縮小するようにワープする。
論文 参考訳(メタデータ) (2020-03-27T06:18:49Z) - Composition of kernel and acquisition functions for High Dimensional
Bayesian Optimization [0.1749935196721634]
目的関数の追加性を用いて、ベイズ最適化のカーネルと取得関数の両方をマッピングする。
このap-proachは確率的代理モデルの学習/更新をより効率的にする。
都市給水システムにおけるポンプの制御を実運用に適用するための結果が提示された。
論文 参考訳(メタデータ) (2020-03-09T15:45:57Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。