論文の概要: Continuous surrogate-based optimization algorithms are well-suited for
expensive discrete problems
- arxiv url: http://arxiv.org/abs/2011.03431v2
- Date: Mon, 30 Nov 2020 19:21:54 GMT
- ステータス: 処理完了
- システム内更新日: 2022-09-29 05:45:12.630343
- Title: Continuous surrogate-based optimization algorithms are well-suited for
expensive discrete problems
- Title(参考訳): 連続サロゲートに基づく最適化アルゴリズムは高価な離散問題に適している
- Authors: Rickard Karlsson, Laurens Bliek, Sicco Verwer, Mathijs de Weerdt
- Abstract要約: 本研究では, 連続代理モデルを用いることで, 最先端の離散代理モデルと競合する性能を示す実証的証拠を示す。
異なる離散構造と時間的制約に関する我々の実験は、どのアルゴリズムがどの種類の問題でうまく機能するかについての洞察を与える。
- 参考スコア(独自算出の注目度): 9.655888042539495
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: One method to solve expensive black-box optimization problems is to use a
surrogate model that approximates the objective based on previous observed
evaluations. The surrogate, which is cheaper to evaluate, is optimized instead
to find an approximate solution to the original problem. In the case of
discrete problems, recent research has revolved around surrogate models that
are specifically constructed to deal with discrete structures. A main
motivation is that literature considers continuous methods, such as Bayesian
optimization with Gaussian processes as the surrogate, to be sub-optimal
(especially in higher dimensions) because they ignore the discrete structure
by, e.g., rounding off real-valued solutions to integers. However, we claim
that this is not true. In fact, we present empirical evidence showing that the
use of continuous surrogate models displays competitive performance on a set of
high-dimensional discrete benchmark problems, including a real-life
application, against state-of-the-art discrete surrogate-based methods. Our
experiments on different discrete structures and time constraints also give
more insight into which algorithms work well on which type of problem.
- Abstract(参考訳): 高価なブラックボックス最適化問題を解決する1つの方法は、以前の観測結果に基づいて目的を近似する代理モデルを使用することである。
評価が容易なsurrogateは、元の問題に対する近似解を見つけるために最適化されている。
離散問題の場合、最近の研究は離散構造を扱うために特別に構築された代理モデルを中心に展開している。
主な動機は、ガウス過程をサロゲートとしてベイズ最適化のような連続的手法を(特に高次元では)準最適(英語版)(sub-optimal)と考えることである。
しかし、これは真実ではないと主張する。
実際, 連続代理モデルを用いた場合, 実運用を含む高次元離散ベンチマーク問題に対して, 最先端の離散代理モデルに対する競合性能を示す実証的証拠を提示する。
異なる離散構造と時間的制約に関する我々の実験は、どのアルゴリズムがどの種類の問題でうまく機能するかについての洞察を与える。
関連論文リスト
- An Efficient Approach for Solving Expensive Constrained Multiobjective Optimization Problems [0.0]
効率的な確率的選択に基づく制約付き多目的EAをPSCMOEAと呼ぶ。
a) 評価された解の実現可能性と収束状態に基づく適応探索境界同定スキームのような新しい要素を含む。
ECMOPを模擬する低評価予算を用いて, 幅広い制約付き問題に対して, 数値実験を行った。
論文 参考訳(メタデータ) (2024-05-22T02:32:58Z) - Discretize Relaxed Solution of Spectral Clustering via a Non-Heuristic
Algorithm [77.53604156112144]
我々は、元の問題と離散化アルゴリズムを橋渡しする1次項を開発する。
非ヒューリスティック法は元のグラフ切断問題を認識しているため、最終的な離散解の方が信頼性が高い。
論文 参考訳(メタデータ) (2023-10-19T13:57:38Z) - Backpropagation of Unrolled Solvers with Folded Optimization [55.04219793298687]
ディープネットワークにおけるコンポーネントとしての制約付き最適化モデルの統合は、多くの専門的な学習タスクに有望な進歩をもたらした。
1つの典型的な戦略はアルゴリズムのアンローリングであり、これは反復解法の操作による自動微分に依存している。
本稿では,非ロール最適化の後方通過に関する理論的知見を提供し,効率よく解けるバックプロパゲーション解析モデルを生成するシステムに繋がる。
論文 参考訳(メタデータ) (2023-01-28T01:50:42Z) - Exploring the Algorithm-Dependent Generalization of AUPRC Optimization
with List Stability [107.65337427333064]
AUPRC(Area Under the Precision-Recall Curve)の最適化は、機械学習にとって重要な問題である。
本研究では, AUPRC最適化の単依存一般化における最初の試行について述べる。
3つの画像検索データセットの実験は、我々のフレームワークの有効性と健全性に言及する。
論文 参考訳(メタデータ) (2022-09-27T09:06:37Z) - Uncertainty-Aware Search Framework for Multi-Objective Bayesian
Optimization [40.40632890861706]
高価な関数評価を用いたマルチオブジェクト(MO)ブラックボックス最適化の問題点を考察する。
UeMOと呼ばれる新しい不確実性対応検索フレームワークを提案し、評価のための入力シーケンスを効率的に選択する。
論文 参考訳(メタデータ) (2022-04-12T16:50:48Z) - Learning Proximal Operators to Discover Multiple Optima [66.98045013486794]
非家族問題における近位演算子を学習するためのエンドツーエンド手法を提案する。
本手法は,弱い目的と穏やかな条件下では,世界規模で収束することを示す。
論文 参考訳(メタデータ) (2022-01-28T05:53:28Z) - Outlier-Robust Sparse Estimation via Non-Convex Optimization [73.18654719887205]
空間的制約が存在する場合の高次元統計量と非破壊的最適化の関連について検討する。
これらの問題に対する新規で簡単な最適化法を開発した。
結論として、効率よくステーションに収束する一階法は、これらのタスクに対して効率的なアルゴリズムを導出する。
論文 参考訳(メタデータ) (2021-09-23T17:38:24Z) - Batched Data-Driven Evolutionary Multi-Objective Optimization Based on
Manifold Interpolation [6.560512252982714]
バッチ化されたデータ駆動型進化的多目的最適化を実現するためのフレームワークを提案する。
オフザシェルフ進化的多目的最適化アルゴリズムがプラグイン方式で適用できるのは、非常に一般的である。
提案するフレームワークは, より高速な収束と各種PF形状に対する強いレジリエンスを特徴とする。
論文 参考訳(メタデータ) (2021-09-12T23:54:26Z) - Joint Continuous and Discrete Model Selection via Submodularity [1.332560004325655]
機械学習のモデル選択問題では、意味のある構造を持つ優れたモデルに対する欲求は、典型的には正規化された最適化問題によって表される。
しかし、多くのシナリオでは、数値的に意味のある構造が離散空間において特定され、難しい非最適化問題を引き起こす。
我々は、ロバスト最適化によって動機づけられた特定の問題クラスに対して、単純な連続的あるいは離散的な制約をいかに扱うかを示す。
論文 参考訳(メタデータ) (2021-02-17T21:14:47Z) - Population-Based Methods: PARTICLE SWARM OPTIMIZATION -- Development of
a General-Purpose Optimizer and Applications [0.0]
この論文は、不等式制約を受ける連続、静的、単目的の最適化問題に関係している。
粒子群最適化のパラダイムは、社会で観察された協調行動の以前のシミュレーションから着想を得たものである。
論文 参考訳(メタデータ) (2021-01-25T09:36:25Z) - Robust, Accurate Stochastic Optimization for Variational Inference [68.83746081733464]
また, 共通最適化手法は, 問題が適度に大きい場合, 変分近似の精度が低下することを示した。
これらの結果から,基礎となるアルゴリズムをマルコフ連鎖の生成とみなして,より堅牢で正確な最適化フレームワークを開発する。
論文 参考訳(メタデータ) (2020-09-01T19:12:11Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。