論文の概要: Optimizing Closed-Loop Performance with Data from Similar Systems: A
Bayesian Meta-Learning Approach
- arxiv url: http://arxiv.org/abs/2211.00077v1
- Date: Mon, 31 Oct 2022 18:25:47 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-02 15:02:58.987568
- Title: Optimizing Closed-Loop Performance with Data from Similar Systems: A
Bayesian Meta-Learning Approach
- Title(参考訳): 類似システムからのデータによる閉ループ性能の最適化:ベイジアンメタラーニングアプローチ
- Authors: Ankush Chakrabarty
- Abstract要約: 性能最適化タスクから収集したデータに基づいて,メタ学習を用いて初期サロゲートモデルを生成する。
制御系の性能最適化を高速化するためのDKN-BO手法の有効性を実証した。
- 参考スコア(独自算出の注目度): 1.370633147306388
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Bayesian optimization (BO) has demonstrated potential for optimizing control
performance in data-limited settings, especially for systems with unknown
dynamics or unmodeled performance objectives. The BO algorithm efficiently
trades-off exploration and exploitation by leveraging uncertainty estimates
using surrogate models. These surrogates are usually learned using data
collected from the target dynamical system to be optimized. Intuitively, the
convergence rate of BO is better for surrogate models that can accurately
predict the target system performance. In classical BO, initial surrogate
models are constructed using very limited data points, and therefore rarely
yield accurate predictions of system performance. In this paper, we propose the
use of meta-learning to generate an initial surrogate model based on data
collected from performance optimization tasks performed on a variety of systems
that are different to the target system. To this end, we employ deep kernel
networks (DKNs) which are simple to train and which comprise encoded Gaussian
process models that integrate seamlessly with classical BO. The effectiveness
of our proposed DKN-BO approach for speeding up control system performance
optimization is demonstrated using a well-studied nonlinear system with unknown
dynamics and an unmodeled performance function.
- Abstract(参考訳): ベイズ最適化(BO)はデータ制限設定における制御性能を最適化する可能性を実証している。
boアルゴリズムは、サーロゲートモデルを用いた不確実性推定を活用し、探索と搾取を効率的にトレードオフする。
これらのサロゲートは通常、ターゲットの動的システムから収集されたデータを使って学習される。
直感的には、boの収束率は、ターゲットシステム性能を正確に予測できるサロゲートモデルより優れている。
古典的なBOでは、初期サロゲートモデルは非常に限られたデータポイントを用いて構築されるため、システム性能の正確な予測はまれである。
本稿では,対象とするシステムとは異なる様々なシステムで実行される性能最適化タスクから収集したデータに基づいて,初期サロゲートモデルを生成するためのメタラーニング手法を提案する。
そこで我々は,従来のboとシームレスに統合可能な符号化ガウス過程モデルを含む,学習が容易なディープカーネルネットワーク(dkns)を採用している。
制御系性能の最適化を高速化するdkn-bo法の有効性を未知の力学系と非モデル化性能関数を用いたよく研究した非線形システムを用いて実証した。
関連論文リスト
- Self-Augmented Preference Optimization: Off-Policy Paradigms for Language Model Alignment [104.18002641195442]
既存のペアデータを必要としない、効果的でスケーラブルなトレーニングパラダイムである自己拡張型優先度最適化(SAPO)を導入する。
負の反応を自律的に生成するセルフプレイの概念に基づいて、我々はさらに、データ探索とエクスプロイトを強化するために、非政治的な学習パイプラインを組み込む。
論文 参考訳(メタデータ) (2024-05-31T14:21:04Z) - Enhanced Bayesian Optimization via Preferential Modeling of Abstract
Properties [49.351577714596544]
本研究では,非測定抽象特性に関する専門家の嗜好を代理モデルに組み込むための,人間とAIの協調型ベイズフレームワークを提案する。
優先判断において、誤った/誤解を招く専門家バイアスを処理できる効率的な戦略を提供する。
論文 参考訳(メタデータ) (2024-02-27T09:23:13Z) - From Function to Distribution Modeling: A PAC-Generative Approach to
Offline Optimization [30.689032197123755]
本稿では、オフラインデータ例の集合を除いて目的関数が不明なオフライン最適化の問題について考察する。
未知の目的関数を学習して最適化するのではなく、より直感的で直接的な視点で、最適化は生成モデルからサンプリングするプロセスと考えることができる。
論文 参考訳(メタデータ) (2024-01-04T01:32:50Z) - Deep Negative Correlation Classification [82.45045814842595]
既存のディープアンサンブル手法は、多くの異なるモデルをナビゲートし、予測を集約する。
深部負相関分類(DNCC)を提案する。
DNCCは、個々の推定器が正確かつ負の相関を持つ深い分類アンサンブルを生成する。
論文 参考訳(メタデータ) (2022-12-14T07:35:20Z) - Model-based Causal Bayesian Optimization [78.120734120667]
モデルに基づく因果ベイズ最適化(MCBO)を提案する。
MCBOは介入と逆のペアをモデリングするのではなく、完全なシステムモデルを学ぶ。
標準的なベイズ最適化とは異なり、我々の取得関数は閉形式では評価できない。
論文 参考訳(メタデータ) (2022-11-18T14:28:21Z) - Towards Automated Design of Bayesian Optimization via Exploratory
Landscape Analysis [11.143778114800272]
AFの動的選択はBO設計に有用であることを示す。
我々は,オートML支援のオンザフライBO設計への道を開き,その動作をランニング・バイ・ランで調整する。
論文 参考訳(メタデータ) (2022-11-17T17:15:04Z) - Sparse Bayesian Optimization [16.867375370457438]
よりスパースで解釈可能な構成を発見できる正規化ベースのアプローチをいくつか提示する。
そこで本研究では,同相連続に基づく新たな微分緩和法を提案し,空間的空間的空間的空間的空間的空間的空間的空間的空間的空間的空間的空間的空間的空間的空間的空間的空間的空間的空間的空間的空間的空間的空間的空間的空間的空間的空間的空間的空間的空間的空間的空間的空間的空間
スパシティのために効率的に最適化できることが示されています。
論文 参考訳(メタデータ) (2022-03-03T18:25:33Z) - Approximate Bayesian Optimisation for Neural Networks [6.921210544516486]
モデル選択の重要性を強調するために、機械学習アルゴリズムを自動化するための一連の作業が行われた。
理想主義的な方法で解析的トラクタビリティと計算可能性を解決する必要性は、効率と適用性を確保することを可能にしている。
論文 参考訳(メタデータ) (2021-08-27T19:03:32Z) - Conservative Objective Models for Effective Offline Model-Based
Optimization [78.19085445065845]
計算設計の問題は、合成生物学からコンピュータアーキテクチャまで、様々な場面で発生している。
本研究では,分布外入力に対する接地的目標の実際の値を低くする目的関数のモデルを学習する手法を提案する。
COMは、様々なMBO問題に対して、既存のメソッドの実装と性能の面では単純である。
論文 参考訳(メタデータ) (2021-07-14T17:55:28Z) - Bayesian Optimization for Selecting Efficient Machine Learning Models [53.202224677485525]
本稿では,予測効率とトレーニング効率の両面において,モデルを協調最適化するための統一ベイズ最適化フレームワークを提案する。
レコメンデーションタスクのためのモデル選択の実験は、この方法で選択されたモデルがモデルのトレーニング効率を大幅に改善することを示している。
論文 参考訳(メタデータ) (2020-08-02T02:56:30Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。