論文の概要: Multi-ResNets for Subspace Preconditioning in Constrained Optimization
- arxiv url: http://arxiv.org/abs/2606.06300v1
- Date: Thu, 04 Jun 2026 15:37:55 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-06-05 22:39:44.908906
- Title: Multi-ResNets for Subspace Preconditioning in Constrained Optimization
- Title(参考訳): 制約付き最適化におけるサブスペースプレコンディショニングのためのマルチResNet
- Authors: Merve Karakas, Christopher J. Williams, Emmanuel O. Balogun, Sadegh Sadeghi Tabas, Christian Brown, Nikhil Rao,
- Abstract要約: MResOptは、制約付き最適化問題のための段階的残差ニューラルネットワークアーキテクチャである。
MResOpt は等式制約多様体を反復する学習された除算演算をサポートすることを示す。
- 参考スコア(独自算出の注目度): 3.874563682396874
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: We propose MResOpt, a staged residual neural network architecture for constrained optimization problems. Our architecture fits within predict-complete-correct pipelines and decomposes constraint satisfaction by priority through intermediate re-completion and stage-aware losses. The framework enables domain-informed ordered constraint satisfaction which allows the network to utilize ordinal structure when present. Under an idealized infinite-width regime, we show that our design behaves as sequential Gaussian Process regression. On synthetic QP, QCQP, and SOCP benchmarks, the staged architecture improves high-priority constraint satisfaction across convex and non-convex settings. On line-flow-constrained AC optimal power flow, we introduce a physics-motivated constraint ordering and show that MResOpt supports a learned division of labor that keeps iterates on the equality manifold, achieving substantially lower high-priority violation than reprojected baselines while remaining computationally efficient.
- Abstract(参考訳): 本稿では,制約付き最適化問題に対する残差ニューラルネットワークアーキテクチャであるMResOptを提案する。
アーキテクチャは予測完全正しいパイプラインに適合し、中間的再コンパイルとステージ認識損失によって制約満足度を優先的に分解する。
このフレームワークはドメインインフォームドされた順序付けられた制約満足度を可能にし、ネットワークが現在あるときの順序構造を利用することができる。
理想化された無限幅の体制の下では、我々の設計は逐次ガウス過程の回帰として振る舞う。
合成QP、QCQP、SOCPベンチマークでは、ステージドアーキテクチャは凸および非凸設定間の高優先度制約満足度を改善する。
ラインフローに制約のあるAC最適電力流について, MResOptは, 計算効率を保ちながら, 再計画されたベースラインよりもかなり低い優先度違反を達成し, 等式多様体上で繰り返し処理を継続する, 学習された分業をサポートすることを示す。
関連論文リスト
- Quantum Tilted Loss in Variational Optimization: Theory and Applications [2.274915755738124]
最適化ランドスケープを再構築するために、Quantum Tilted Loss (QTL)を導入します。
QTLは、問題の真のグローバルなミニマを保ちながら、構造化された設定で勾配信号を増幅することができる。
トレーニング可能性と予測可能性のトレードオフを形式化し、アグレッシブな傾きが最適化のボトルネックを根本的に変えることを示す。
論文 参考訳(メタデータ) (2026-05-04T17:25:43Z) - Optimizing Entanglement Distribution Protocols: Maximizing Classical Information in Quantum Networks [5.621690515150937]
大規模量子ネットワークを実現する上で,効率的な絡み合い分布は基礎的な課題である。
本稿では,4つの重要な展開を導入することで,絡み合い分布問題に対処する。
まず、量子通信の第一の応用がプライベート情報の伝達であることを認識し、エンサンブル容量(EC)を導出する。
論文 参考訳(メタデータ) (2026-03-26T12:08:13Z) - Robust Stochastically-Descending Unrolled Networks [85.6993263983062]
Deep Unrolling(ディープ・アンローリング)は、トレーニング可能なニューラルネットワークの層に切り捨てられた反復アルゴリズムをアンロールする、新たな学習最適化手法である。
アンロールネットワークの収束保証と一般化性は、いまだにオープンな理論上の問題であることを示す。
提案した制約の下で訓練されたアンロールアーキテクチャを2つの異なるアプリケーションで数値的に評価する。
論文 参考訳(メタデータ) (2023-12-25T18:51:23Z) - Neural Quantile Optimization for Edge-Cloud Networking [13.509945075582447]
我々は,バースト可能な請求書に基づいて制約を満足し,コストを最小化するエッジ・クラウド・コンピューティング・ネットワークにおいて,最適なトラフィック割当方式を模索する。
本稿では,教師なし学習による最適化問題を解決するため,Gumbel-softmaxサンプリングネットワークを提案する。
トレーニングされたネットワークは、効率的なトラフィック割当スキームサンプリングとして機能し、実現可能性およびコスト関数値のランダム戦略を著しく上回る。
論文 参考訳(メタデータ) (2023-07-11T11:05:10Z) - Iterative Soft Shrinkage Learning for Efficient Image Super-Resolution [91.3781512926942]
画像超解像(SR)は、CNNからトランスフォーマーアーキテクチャへの広範なニューラルネットワーク設計を目撃している。
本研究は,市販のネットワーク設計を生かし,基礎となる計算オーバーヘッドを低減するため,超高解像度イテレーションにおけるネットワークプルーニングの可能性について検討する。
本研究では, ランダムネットワークのスパース構造を最適化し, 重要でない重みを小さめに微調整することにより, 反復型軟収縮率(ISS-P)法を提案する。
論文 参考訳(メタデータ) (2023-03-16T21:06:13Z) - Robust Deep Compressive Sensing with Recurrent-Residual Structural
Constraints [0.0]
既存のディープラーニング(CS)手法は、適応的なオンライン最適化を無視するか、コストのかかる反復的な再構築に依存している。
この研究は、R$2$CS-NETと呼ばれる再帰的構造制約を持つ新しいイメージCSフレームワークを探索する。
適応型オンライン最適化を効率的にブリッジする最初のディープCSフレームワークとして、R$2$CS-NETは、オンライン最適化の堅牢性とディープラーニング手法の効率性と非線形能力を統合する。
論文 参考訳(メタデータ) (2022-07-15T05:56:13Z) - Efficient Micro-Structured Weight Unification and Pruning for Neural
Network Compression [56.83861738731913]
ディープニューラルネットワーク(DNN)モデルは、特にリソース制限されたデバイスにおいて、実用的なアプリケーションに不可欠である。
既往の非構造的あるいは構造化された重量刈り法は、推論を真に加速することはほとんど不可能である。
ハードウェア互換のマイクロ構造レベルでの一般化された重み統一フレームワークを提案し,高い圧縮と加速度を実現する。
論文 参考訳(メタデータ) (2021-06-15T17:22:59Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。