論文の概要: A Physics-Informed Learning Framework to Solve the Infinite-Horizon Optimal Control Problem
- arxiv url: http://arxiv.org/abs/2505.21842v1
- Date: Wed, 28 May 2025 00:21:49 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-05-29 17:35:50.336582
- Title: A Physics-Informed Learning Framework to Solve the Infinite-Horizon Optimal Control Problem
- Title(参考訳): 無限水平最適制御問題を解く物理情報学習フレームワーク
- Authors: Filippos Fotiadis, Kyriakos G. Vamvoudakis,
- Abstract要約: 非線形システムの無限水平最適制御問題を解くために,物理インフォームドニューラルネットワーク(PINN)フレームワークを提案する。
代わりに、一意解を持つ定常HJBの有限水平変種にPINNを適用することで、この問題に取り組む。
多くの既存手法とは異なり、提案手法は非ポリノミカル基底関数とうまく機能する。
- 参考スコア(独自算出の注目度): 4.2402873718254535
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: We propose a physics-informed neural networks (PINNs) framework to solve the infinite-horizon optimal control problem of nonlinear systems. In particular, since PINNs are generally able to solve a class of partial differential equations (PDEs), they can be employed to learn the value function of the infinite-horizon optimal control problem via solving the associated steady-state Hamilton-Jacobi-Bellman (HJB) equation. However, an issue here is that the steady-state HJB equation generally yields multiple solutions; hence if PINNs are directly employed to it, they may end up approximating a solution that is different from the optimal value function of the problem. We tackle this by instead applying PINNs to a finite-horizon variant of the steady-state HJB that has a unique solution, and which uniformly approximates the optimal value function as the horizon increases. An algorithm to verify if the chosen horizon is large enough is also given, as well as a method to extend it -- with reduced computations and robustness to approximation errors -- in case it is not. Unlike many existing methods, the proposed technique works well with non-polynomial basis functions, does not require prior knowledge of a stabilizing controller, and does not perform iterative policy evaluations. Simulations are performed, which verify and clarify theoretical findings.
- Abstract(参考訳): 非線形システムの無限水平最適制御問題を解くために,物理インフォームドニューラルネットワーク(PINN)フレームワークを提案する。
特に、PINNは一般に偏微分方程式(PDE)のクラスを解くことができるため、関連する定常状態ハミルトン・ヤコビ・ベルマン方程式(HJB)を解くことにより、無限水平最適制御問題の値関数を学習することができる。
しかし、ここでの問題は、定常 HJB 方程式が一般に複数の解をもたらすことである。したがって、PINN が直接適用されれば、問題の最適値関数とは異なる解を近似することになるかもしれない。
我々は代わりに、一意解を持つ定常HJBの有限水平変種にPINNを適用し、水平線が大きくなるにつれて最適値関数を均一に近似する。
選択した地平線が十分に大きいかどうかを検証するアルゴリズムや、それを拡張する手法も提供される。
多くの既存手法とは異なり、提案手法は非ポリノミカル基底関数とうまく機能し、安定化制御器の事前知識を必要とせず、反復的なポリシー評価を行わない。
シミュレーションを行い、理論的な発見を検証し、明らかにする。
関連論文リスト
- Hamilton-Jacobi Based Policy-Iteration via Deep Operator Learning [9.950128864603599]
我々は、DeepONetと最近開発されたポリシースキームを組み込んで、最適制御問題を数値的に解く。
ニューラルネットワークをトレーニングすると、最適制御問題とHJB方程式の解を素早く推測できる。
論文 参考訳(メタデータ) (2024-06-16T12:53:17Z) - Operator Learning Enhanced Physics-informed Neural Networks for Solving
Partial Differential Equations Characterized by Sharp Solutions [10.999971808508437]
そこで我々は,OL-PINN(Operator Learning Enhanced Physics-informed Neural Networks)と呼ばれる新しいフレームワークを提案する。
提案手法は, 強い一般化能力を実現するために, 少数の残差点しか必要としない。
精度を大幅に向上すると同時に、堅牢なトレーニングプロセスも保証する。
論文 参考訳(メタデータ) (2023-10-30T14:47:55Z) - Constrained Optimization via Exact Augmented Lagrangian and Randomized
Iterative Sketching [55.28394191394675]
等式制約付き非線形非IBS最適化問題に対する適応的不正確なニュートン法を開発した。
ベンチマーク非線形問題,LVMのデータによる制約付きロジスティック回帰,PDE制約問題において,本手法の優れた性能を示す。
論文 参考訳(メタデータ) (2023-05-28T06:33:37Z) - Message Passing Neural PDE Solvers [60.77761603258397]
我々は、バックプロップ最適化されたニューラル関数近似器で、グラフのアリーデザインのコンポーネントを置き換えるニューラルメッセージパッシング解決器を構築した。
本稿では, 有限差分, 有限体積, WENOスキームなどの古典的手法を表現的に含んでいることを示す。
本研究では, 異なる領域のトポロジ, 方程式パラメータ, 離散化などにおける高速, 安定, 高精度な性能を, 1次元, 2次元で検証する。
論文 参考訳(メタデータ) (2022-02-07T17:47:46Z) - Physics-Informed Neural Operator for Learning Partial Differential
Equations [55.406540167010014]
PINOは、演算子を学ぶために異なる解像度でデータとPDE制約を組み込んだ最初のハイブリッドアプローチである。
結果の PINO モデルは、多くの人気のある PDE ファミリの基底構造解演算子を正確に近似することができる。
論文 参考訳(メタデータ) (2021-11-06T03:41:34Z) - Semi-Implicit Neural Solver for Time-dependent Partial Differential
Equations [4.246966726709308]
本稿では,PDEの任意のクラスに対して,データ駆動方式で最適な反復スキームを学習するためのニューラルソルバを提案する。
従来の反復解法に類似したニューラルソルバの正当性と収束性に関する理論的保証を提供する。
論文 参考訳(メタデータ) (2021-09-03T12:03:10Z) - dNNsolve: an efficient NN-based PDE solver [62.997667081978825]
ODE/PDEを解決するためにデュアルニューラルネットワークを利用するdNNsolveを紹介します。
我々は,dNNsolveが1,2,3次元の幅広いODE/PDEを解くことができることを示す。
論文 参考訳(メタデータ) (2021-03-15T19:14:41Z) - Optimizing Wireless Systems Using Unsupervised and
Reinforced-Unsupervised Deep Learning [96.01176486957226]
無線ネットワークにおけるリソース割り当てとトランシーバーは、通常最適化問題の解決によって設計される。
本稿では,変数最適化と関数最適化の両問題を解くための教師なし・教師なし学習フレームワークを紹介する。
論文 参考訳(メタデータ) (2020-01-03T11:01:52Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。