論文の概要: Near-optimal control of dynamical systems with neural ordinary
differential equations
- arxiv url: http://arxiv.org/abs/2206.11120v1
- Date: Wed, 22 Jun 2022 14:11:11 GMT
- ステータス: 処理完了
- システム内更新日: 2022-06-23 16:34:21.652415
- Title: Near-optimal control of dynamical systems with neural ordinary
differential equations
- Title(参考訳): 神経常微分方程式をもつ力学系の近似最適制御
- Authors: Lucas B\"ottcher and Thomas Asikis
- Abstract要約: ディープラーニングとニューラルネットワークに基づく最適化の最近の進歩は、高次元力学系を含む制御問題を解くのに役立つ方法の開発に寄与している。
まず、時間を通して切り詰められた非切り抜きのバックプロパゲーションが、実行時のパフォーマンスとニューラルネットワークが最適な制御関数を学習する能力にどのように影響するかを分析する。
- 参考スコア(独自算出の注目度): 0.0
- License: http://creativecommons.org/licenses/by-nc-sa/4.0/
- Abstract: Optimal control problems naturally arise in many scientific applications
where one wishes to steer a dynamical system from a certain initial state
$\mathbf{x}_0$ to a desired target state $\mathbf{x}^*$ in finite time $T$.
Recent advances in deep learning and neural network-based optimization have
contributed to the development of methods that can help solve control problems
involving high-dimensional dynamical systems. In particular, the framework of
neural ordinary differential equations (neural ODEs) provides an efficient
means to iteratively approximate continuous time control functions associated
with analytically intractable and computationally demanding control tasks.
Although neural ODE controllers have shown great potential in solving complex
control problems, the understanding of the effects of hyperparameters such as
network structure and optimizers on learning performance is still very limited.
Our work aims at addressing some of these knowledge gaps to conduct efficient
hyperparameter optimization. To this end, we first analyze how truncated and
non-truncated backpropagation through time affect runtime performance and the
ability of neural networks to learn optimal control functions. Using analytical
and numerical methods, we then study the role of parameter initializations,
optimizers, and neural-network architecture. Finally, we connect our results to
the ability of neural ODE controllers to implicitly regularize control energy.
- Abstract(参考訳): 最適制御問題は、ある初期状態 $\mathbf{x}_0$ から所望の目標状態 $\mathbf{x}^*$ までの力学系を有限時間 $T$ で操りたいとする多くの科学的応用において自然に発生する。
ディープラーニングとニューラルネットワークに基づく最適化の最近の進歩は、高次元力学系に関わる制御問題を解決する方法の開発に寄与している。
特に、ニューラル常微分方程式(ニューラルODE)の枠組みは、解析的に難解で計算的に要求される制御タスクに関連する連続時間制御関数を反復的に近似する効率的な手段を提供する。
ニューラルODEコントローラは複雑な制御問題を解く大きな可能性を示しているが、ネットワーク構造やオプティマイザなどのハイパーパラメータが学習性能に与える影響の理解は依然として限られている。
本研究の目的は,これらの知識ギャップに対処し,効率的なハイパーパラメータ最適化を実現することである。
この目的のために,まず,時間経過による停止および非停止バックプロパゲーションが実行時性能およびニューラルネットワークが最適制御関数を学習する能力に与える影響を解析する。
解析的および数値的手法を用いて,パラメータ初期化,最適化,ニューラルネットワークアーキテクチャの役割を研究する。
最後に,神経odeコントローラが制御エネルギーを暗黙的に規則化する能力と結果を結びつける。
関連論文リスト
- Neural Control: Concurrent System Identification and Control Learning with Neural ODE [13.727727205587804]
ニューラル・コントロール(NC)と呼ばれる未知の力学系を制御するニューラル・ODEに基づく手法を提案する。
本モデルは,対象状態へ誘導する最適制御と同様に,システムダイナミクスを同時に学習する。
実験では,未知の力学系の最適制御を学習するためのモデルの有効性を実証した。
論文 参考訳(メタデータ) (2024-01-03T17:05:17Z) - Model-Based Control with Sparse Neural Dynamics [23.961218902837807]
モデル学習と予測制御を統合した新しいフレームワークを提案する。
我々は,既存の最先端手法よりもクローズドループ性能を向上できることを示す。
論文 参考訳(メタデータ) (2023-12-20T06:25:02Z) - Globally Optimal Training of Neural Networks with Threshold Activation
Functions [63.03759813952481]
しきい値アクティベートを伴うディープニューラルネットワークの重み劣化正規化学習問題について検討した。
ネットワークの特定の層でデータセットを破砕できる場合に、簡易な凸最適化の定式化を導出する。
論文 参考訳(メタデータ) (2023-03-06T18:59:13Z) - NeuralStagger: Accelerating Physics-constrained Neural PDE Solver with
Spatial-temporal Decomposition [67.46012350241969]
本稿では,NeuralStaggerと呼ばれる一般化手法を提案する。
元の学習タスクをいくつかの粗い解像度のサブタスクに分解する。
本稿では,2次元および3次元流体力学シミュレーションにおけるNeuralStaggerの適用例を示す。
論文 参考訳(メタデータ) (2023-02-20T19:36:52Z) - The least-control principle for learning at equilibrium [65.2998274413952]
我々は、平衡反復ニューラルネットワーク、深層平衡モデル、メタラーニングを学ぶための新しい原理を提案する。
私たちの結果は、脳がどのように学習するかを明らかにし、幅広い機械学習問題にアプローチする新しい方法を提供します。
論文 参考訳(メタデータ) (2022-07-04T11:27:08Z) - Efficient Model-Based Multi-Agent Mean-Field Reinforcement Learning [89.31889875864599]
マルチエージェントシステムにおける学習に有効なモデルベース強化学習アルゴリズムを提案する。
我々の理論的な貢献は、MFCのモデルベース強化学習における最初の一般的な後悔の限界である。
コア最適化問題の実用的なパラメトリゼーションを提供する。
論文 参考訳(メタデータ) (2021-07-08T18:01:02Z) - Implicit energy regularization of neural ordinary-differential-equation
control [3.5880535198436156]
暗黙的なエネルギー正規化を伴う汎用型ニューラル常微分方程式制御(NODEC)フレームワークを提案する。
nodecは動的システムを、予め定義された時間内に、望ましいターゲット状態に向けて制御できることを実証する。
論文 参考訳(メタデータ) (2021-03-11T08:28:15Z) - Neural Network Approximations of Compositional Functions With
Applications to Dynamical Systems [3.660098145214465]
我々は,合成関数とそのニューラルネットワーク近似の近似理論を開発した。
構成関数の重要な特徴の集合と,ニューラルネットワークの特徴と複雑性の関係を同定する。
関数近似に加えて、ニューラルネットワークの誤差上限の式もいくつか証明する。
論文 参考訳(メタデータ) (2020-12-03T04:40:25Z) - Learning to Control PDEs with Differentiable Physics [102.36050646250871]
本稿では,ニューラルネットワークが長い時間をかけて複雑な非線形物理系の理解と制御を学べる新しい階層型予測器・相関器手法を提案する。
本手法は,複雑な物理系の理解に成功し,PDEに関わるタスクに対してそれらを制御できることを実証する。
論文 参考訳(メタデータ) (2020-01-21T11:58:41Z) - Optimizing Wireless Systems Using Unsupervised and
Reinforced-Unsupervised Deep Learning [96.01176486957226]
無線ネットワークにおけるリソース割り当てとトランシーバーは、通常最適化問題の解決によって設計される。
本稿では,変数最適化と関数最適化の両問題を解くための教師なし・教師なし学習フレームワークを紹介する。
論文 参考訳(メタデータ) (2020-01-03T11:01:52Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。