論文の概要: Bilevel Optimization of Topology and Hyperparameters (BOTH)
- arxiv url: http://arxiv.org/abs/2609.21758v1
- Date: Fri, 18 Sep 2026 13:29:55 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-09-21 18:40:17.125716
- Title: Bilevel Optimization of Topology and Hyperparameters (BOTH)
- Title(参考訳): トポロジーとハイパーパラメータ(BOTH)の双レベル最適化
- Abstract要約: トポロジー最適化の1段階か2段階のみを評価することは十分有益であることを示す。
本稿では, 密度場のニューラルパラメタライゼーションを利用して, 応力制約問題とコンプライアンス問題に本手法を適用した。
- 参考スコア(独自算出の注目度): 41.99844472131922
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Topology optimization (TO) represents a significant step towards automating the design process: given a working simulation, TO can produce a viable prototype at the press of a button by differentiating the simulation and iteratively improving the design. In practice, however, TO is riddled with ``magic numbers''---hyperparameters whose tuning significantly affects the outcome. Finding the right values typically requires not only deep problem-specific knowledge but also extensive trial-and-error. While practitioners can use surrogate-assisted hyperparameter optimization as an alternative, this approach requires strictly limiting the number of hyperparameters through careful problem formulation. Here, we propose differentiating TO itself using automatic differentiation. This yields ``hypergradients'' that allow us to tune these hyperparameters in tandem with the primary optimization. We show that evaluating just one or two steps of TO is sufficiently informative and that the method scales favorably to thousands of hyperparameters at an expense comparable to only a few standard TO runs. We demonstrate this approach on stress-constrained and compliance problems, with the latter utilizing a neural parameterization of the density field.
- Abstract(参考訳): トポロジ最適化(TO)は、設計プロセスを自動化するための重要なステップである: 作業シミュレーションが与えられたら、シミュレーションを微分し、設計を反復的に改善することで、ボタンを押すことで実行可能なプロトタイプを作成できる。
しかし実際には、TOは'magic numbers'------ハイパーパラメータで取り除かれ、そのチューニングは結果に大きく影響する。
適切な値を見つけるには、一般的に、深い問題固有の知識だけでなく、広範な試行錯誤も必要です。
代用としてサロゲート支援型ハイパーパラメータ最適化を用いることができるが、この手法では注意深い問題定式化によってハイパーパラメータの数を厳格に制限する必要がある。
本稿では,自動微分を用いたTO自体の微分を提案する。
これにより ``hypergradients' が得られ、それによってこれらのハイパーパラメータを一次最適化と組み合わせることができる。
TO の 1 段階か 2 段階のみを評価することは十分有益であり,標準 TO の実行数に匹敵するコストで数千のハイパーパラメータに拡張可能であることを示す。
本稿では, 密度場のニューラルパラメタライゼーションを利用して, 応力制約問題とコンプライアンス問題に本手法を適用した。
関連論文リスト
- Scaling Exponents Across Parameterizations and Optimizers [94.54718325264218]
本稿では,先行研究における重要な仮定を考察し,パラメータ化の新たな視点を提案する。
私たちの経験的調査には、3つの組み合わせでトレーニングされた数万のモデルが含まれています。
最高の学習率のスケーリング基準は、以前の作業の仮定から除外されることがよくあります。
論文 参考訳(メタデータ) (2024-07-08T12:32:51Z) - A Globally Convergent Gradient-based Bilevel Hyperparameter Optimization
Method [0.0]
ハイパーパラメータ最適化問題の解法として,勾配に基づく双レベル法を提案する。
提案手法は, より低い計算量に収束し, テストセットをより良く一般化するモデルに導かれることを示す。
論文 参考訳(メタデータ) (2022-08-25T14:25:16Z) - HyP-ABC: A Novel Automated Hyper-Parameter Tuning Algorithm Using
Evolutionary Optimization [1.6114012813668934]
改良されたミツバチコロニーを用いたハイブリッドハイパーパラメータ最適化アルゴリズムHyP-ABCを提案する。
最先端技術と比較して、HyP-ABCは効率が良く、調整すべきパラメータが限られている。
論文 参考訳(メタデータ) (2021-09-11T16:45:39Z) - Amortized Auto-Tuning: Cost-Efficient Transfer Optimization for
Hyperparameter Recommendation [83.85021205445662]
本稿では,機械学習モデルのチューニングを高速化する自動チューニング(AT2)を提案する。
マルチタスクマルチ忠実ベイズ最適化フレームワークの徹底的な解析を行い、最適なインスタンス化-アモータイズ自動チューニング(AT2)を実現する。
論文 参考訳(メタデータ) (2021-06-17T00:01:18Z) - Optimizing Large-Scale Hyperparameters via Automated Learning Algorithm [97.66038345864095]
ゼロ階超勾配(HOZOG)を用いた新しいハイパーパラメータ最適化法を提案する。
具体的には、A型制約最適化問題として、まずハイパーパラメータ最適化を定式化する。
次に、平均ゼロ階超勾配を用いてハイパーパラメータを更新する。
論文 参考訳(メタデータ) (2021-02-17T21:03:05Z) - Automatic Setting of DNN Hyper-Parameters by Mixing Bayesian
Optimization and Tuning Rules [0.6875312133832078]
トレーニングおよび検証セット上で,ネットワークの結果を評価し解析するための新しいアルゴリズムを構築した。
我々は、一連のチューニングルールを使用して、新しいハイパーパラメータと/またはハイパーパラメータ検索スペースを減らし、より良い組み合わせを選択する。
論文 参考訳(メタデータ) (2020-06-03T08:53:48Z) - Implicit differentiation of Lasso-type models for hyperparameter
optimization [82.73138686390514]
ラッソ型問題に適した行列逆転のない効率的な暗黙微分アルゴリズムを提案する。
提案手法は,解の空間性を利用して高次元データにスケールする。
論文 参考訳(メタデータ) (2020-02-20T18:43:42Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。