論文の概要: Noisy-Input Entropy Search for Efficient Robust Bayesian Optimization
- arxiv url: http://arxiv.org/abs/2002.02820v1
- Date: Fri, 7 Feb 2020 14:48:16 GMT
- ステータス: 処理完了
- システム内更新日: 2023-01-03 03:50:25.023903
- Title: Noisy-Input Entropy Search for Efficient Robust Bayesian Optimization
- Title(参考訳): 効率的ロバストベイズ最適化のための雑音入力エントロピー探索
- Authors: Lukas P. Fr\"ohlich, Edgar D. Klenske, Julia Vinogradska, Christian
Daniel, Melanie N. Zeilinger
- Abstract要約: ノイズ・インプット・エントロピー探索(NES)は、入力ノイズと測定ノイズの両方の問題に対して頑健な最適性を求めるように設計されている。
NESは、すべてのベンチマークで既存の手法よりも優れた、堅牢な最適化を確実に見つける。
- 参考スコア(独自算出の注目度): 5.836533862551427
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We consider the problem of robust optimization within the well-established
Bayesian optimization (BO) framework. While BO is intrinsically robust to noisy
evaluations of the objective function, standard approaches do not consider the
case of uncertainty about the input parameters. In this paper, we propose
Noisy-Input Entropy Search (NES), a novel information-theoretic acquisition
function that is designed to find robust optima for problems with both input
and measurement noise. NES is based on the key insight that the robust
objective in many cases can be modeled as a Gaussian process, however, it
cannot be observed directly. We evaluate NES on several benchmark problems from
the optimization literature and from engineering. The results show that NES
reliably finds robust optima, outperforming existing methods from the
literature on all benchmarks.
- Abstract(参考訳): ベイズ最適化(BO)フレームワークにおけるロバスト最適化の問題点を考察する。
BOは目的関数の雑音評価に本質的に頑健であるが、標準手法では入力パラメータの不確実性については考慮していない。
本稿では,入力ノイズと測定ノイズの両方の問題に対して,頑健な最適解を求めるための情報理論獲得関数であるNoisy-Input Entropy Search (NES)を提案する。
NESは、多くの場合、堅牢な目的はガウス過程としてモデル化できるという重要な洞察に基づいているが、直接観察することはできない。
我々は、最適化文献とエンジニアリングから、いくつかのベンチマーク問題に対してNESを評価する。
その結果、NESは、すべてのベンチマークで既存の手法よりも優れたロバストな最適化を確実に見つけることがわかった。
関連論文リスト
- BO4IO: A Bayesian optimization approach to inverse optimization with uncertainty quantification [5.031974232392534]
この研究はデータ駆動逆最適化(IO)に対処する。
目的は最適化モデルにおける未知のパラメータを、最適あるいは準最適と仮定できる観測された決定から推定することである。
論文 参考訳(メタデータ) (2024-05-28T06:52:17Z) - Efficient Robust Bayesian Optimization for Arbitrary Uncertain Inputs [13.578262325229161]
本稿では,任意の入力不確実性の下で一貫して動作するロバストな最適化アルゴリズムであるAIRBOを提案する。
提案手法は,最大平均離散度(MMD)を用いてガウス過程を有効化することにより任意の分布の不確実な入力を直接モデル化し,さらにNystrom近似による後部推論を高速化する。
MMD推定誤差と合成関数および実問題に関する広範な実験により,本手法が様々な入力不確実性に対処し,最先端の性能を実現することができることを示す。
論文 参考訳(メタデータ) (2023-10-31T03:29:31Z) - Equation Discovery with Bayesian Spike-and-Slab Priors and Efficient Kernels [57.46832672991433]
ケルネル学習とBayesian Spike-and-Slab pres (KBASS)に基づく新しい方程式探索法を提案する。
カーネルレグレッションを用いてターゲット関数を推定する。これはフレキシブルで表現力があり、データ空間やノイズに対してより堅牢である。
我々は,効率的な後部推論と関数推定のための予測伝搬予測最大化アルゴリズムを開発した。
論文 参考訳(メタデータ) (2023-10-09T03:55:09Z) - A Corrected Expected Improvement Acquisition Function Under Noisy
Observations [22.63212972670109]
期待される改善の順序 (EI) はベイズ最適化において最も広く用いられている政策の一つである。
既存の解に関する不確実性は、多くの解析的EI型法で無視されることが多い。
本稿では,ガウス過程(GP)モデルによって提供される共分散情報を組み込むことで,その閉形式表現を補正するEIの修正を提案する。
論文 参考訳(メタデータ) (2023-10-08T13:50:39Z) - Distributionally Robust Variational Quantum Algorithms with Shifted Noise [9.705847892362165]
本稿では、変分量子アルゴリズム(VQA)を未知のシフトノイズに対して頑健に最適化する方法を示す。
この研究は、シフトノイズの影響を受け、VQAの信頼性を向上させるための最初のステップである。
論文 参考訳(メタデータ) (2023-08-28T23:19:57Z) - Generalizing Bayesian Optimization with Decision-theoretic Entropies [102.82152945324381]
統計的決定論の研究からシャノンエントロピーの一般化を考える。
まず,このエントロピーの特殊なケースがBO手順でよく用いられる獲得関数に繋がることを示す。
次に、損失に対する選択肢の選択が、どのようにして柔軟な獲得関数の族をもたらすかを示す。
論文 参考訳(メタデータ) (2022-10-04T04:43:58Z) - Robust Multi-Objective Bayesian Optimization Under Input Noise [27.603887040015888]
多くの製造プロセスにおいて、設計パラメータはランダムな入力ノイズを受けており、結果として製品は期待よりも性能が低い。
本研究では,入力雑音に頑健な最初の多目的BO法を提案する。
論文 参考訳(メタデータ) (2022-02-15T16:33:48Z) - RoMA: Robust Model Adaptation for Offline Model-based Optimization [115.02677045518692]
入力出力クエリの静的データセットからブラックボックス目的関数を最大化する入力を探索する問題を考える。
この問題を解決するための一般的なアプローチは、真の客観的関数を近似するプロキシモデルを維持することである。
ここでの大きな課題は、検索中に逆最適化された入力を避ける方法である。
論文 参考訳(メタデータ) (2021-10-27T05:37:12Z) - Outlier-Robust Sparse Estimation via Non-Convex Optimization [73.18654719887205]
空間的制約が存在する場合の高次元統計量と非破壊的最適化の関連について検討する。
これらの問題に対する新規で簡単な最適化法を開発した。
結論として、効率よくステーションに収束する一階法は、これらのタスクに対して効率的なアルゴリズムを導出する。
論文 参考訳(メタデータ) (2021-09-23T17:38:24Z) - Near-Optimal High Probability Complexity Bounds for Non-Smooth
Stochastic Optimization with Heavy-Tailed Noise [63.304196997102494]
アルゴリズムが高い確率で小さな客観的残差を与えることを理論的に保証することが不可欠である。
既存の非滑らか凸最適化法は、負のパワーまたは対数的な信頼度に依存する境界の複雑さを持つ。
クリッピングを用いた2つの勾配法に対して, 新たなステップサイズルールを提案する。
論文 参考訳(メタデータ) (2021-06-10T17:54:21Z) - Distributionally Robust Bayesian Optimization [121.71766171427433]
そこで本研究では,ゼロ次雑音最適化のための分散ロバストなベイズ最適化アルゴリズム(DRBO)を提案する。
提案アルゴリズムは, 種々の設定において, 線形に頑健な後悔を確実に得る。
提案手法は, 実世界のベンチマークと実世界のベンチマークの両方において, 頑健な性能を示す。
論文 参考訳(メタデータ) (2020-02-20T22:04:30Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。