論文の概要: Formal Controller Synthesis for Markov Jump Linear Systems with
Uncertain Dynamics
- arxiv url: http://arxiv.org/abs/2212.00679v1
- Date: Thu, 1 Dec 2022 17:36:30 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-02 17:14:38.725357
- Title: Formal Controller Synthesis for Markov Jump Linear Systems with
Uncertain Dynamics
- Title(参考訳): 不確かさを持つマルコフジャンプ線形系の形式制御器合成
- Authors: Luke Rickard, Thom Badings, Licio Romao, Nils Jansen, Alessandro Abate
- Abstract要約: マルコフジャンプ線形システム(MJLS)のための制御器の合成法を提案する。
MJLSは、未知の加法的障害を持つ線形力学の有限集合で構成され、これらのモード間のジャンプはマルコフ決定過程(MDP)によって制御される。
我々のアプローチは、元のシステムの離散的かつ連続的な振る舞いの両方をキャプチャする有限状態抽象化を生成することに基づいている。
- 参考スコア(独自算出の注目度): 63.389791701870735
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Automated synthesis of provably correct controllers for cyber-physical
systems is crucial for deploying these systems in safety-critical scenarios.
However, their hybrid features and stochastic or unknown behaviours make this
synthesis problem challenging. In this paper, we propose a method for
synthesizing controllers for Markov jump linear systems (MJLSs), a particular
class of cyber-physical systems, that certifiably satisfy a requirement
expressed as a specification in probabilistic computation tree logic (PCTL). An
MJLS consists of a finite set of linear dynamics with unknown additive
disturbances, where jumps between these modes are governed by a Markov decision
process (MDP). We consider both the case where the transition function of this
MDP is given by probability intervals or where it is completely unknown. Our
approach is based on generating a finite-state abstraction which captures both
the discrete and the continuous behaviour of the original system. We formalise
such abstraction as an interval Markov decision process (iMDP): intervals of
transition probabilities are computed using sampling techniques from the
so-called "scenario approach", resulting in a probabilistically sound
approximation of the MJLS. This iMDP abstracts both the jump dynamics between
modes, as well as the continuous dynamics within the modes. To demonstrate the
efficacy of our technique, we apply our method to multiple realistic benchmark
problems, in particular, temperature control, and aerial vehicle delivery
problems.
- Abstract(参考訳): サイバーフィジカルシステムのための確実に正しい制御器の自動合成は、これらのシステムを安全クリティカルなシナリオでデプロイするのに不可欠である。
しかし、それらのハイブリッド特徴と確率的あるいは未知の振る舞いは、この合成問題を難しくする。
本稿では,マルコフジャンプ線形システム(MJLS)の制御系を,確率計算木論理(PCTL)の仕様として表現された要件を確実に満たす手法を提案する。
MJLSは、未知の加法的障害を持つ線形力学の有限集合で構成され、これらのモード間のジャンプはマルコフ決定過程(MDP)によって制御される。
このMDPの遷移関数が確率間隔によって与えられる場合や、それが完全に未知である場合も考慮する。
我々のアプローチは、元のシステムの離散的および連続的な振る舞いの両方をキャプチャする有限状態抽象を生成することに基づいている。
いわゆる"scenarioアプローチ"からのサンプリング技術を用いて,遷移確率の間隔を計算し,mjlsの確率的に近似する。
このiMDPはモード間のジャンプダイナミクスとモード内の連続ダイナミクスの両方を抽象化する。
本手法の有効性を実証するために,本手法を複数の現実的なベンチマーク問題,特に温度制御や航空機の配送問題に適用する。
関連論文リスト
- Correct-by-Construction Control for Stochastic and Uncertain Dynamical
Models via Formal Abstractions [44.99833362998488]
我々は、様々なモデリングの前提の下でこの問題を解決するために使用できる抽象フレームワークを開発する。
我々は、与えられた仕様を満たすための保証とともに、iMDPの最適ポリシーを計算するために最先端の検証技術を使用します。
そして、このポリシーを構築によって、これらの保証が動的モデルに受け継がれるフィードバックコントローラに改良できることを示します。
論文 参考訳(メタデータ) (2023-11-16T11:03:54Z) - Robust Control for Dynamical Systems With Non-Gaussian Noise via Formal
Abstractions [59.605246463200736]
雑音分布の明示的な表現に依存しない新しい制御器合成法を提案する。
まず、連続制御系を有限状態モデルに抽象化し、離散状態間の確率的遷移によってノイズを捕捉する。
我々は最先端の検証技術を用いてマルコフ決定プロセスの間隔を保証し、これらの保証が元の制御システムに受け継がれるコントローラを演算する。
論文 参考訳(メタデータ) (2023-01-04T10:40:30Z) - Online Probabilistic Model Identification using Adaptive Recursive MCMC [8.465242072268019]
適応再帰的マルコフ連鎖モンテカルロ法(ARMCMC)を提案する。
モデルパラメータの確率密度関数全体を計算しながら、従来のオンライン手法の欠点を解消する。
本研究では,ソフト曲げアクチュエータとハント・クロスリー動的モデルを用いてパラメータ推定を行った。
論文 参考訳(メタデータ) (2022-10-23T02:06:48Z) - Probabilities Are Not Enough: Formal Controller Synthesis for Stochastic
Dynamical Models with Epistemic Uncertainty [68.00748155945047]
複雑な力学系のモデルにおける不確実性を捉えることは、安全なコントローラの設計に不可欠である。
いくつかのアプローチでは、安全と到達可能性に関する時間的仕様を満たすポリシーを形式的な抽象化を用いて合成する。
我々の貢献は、ノイズ、不確実なパラメータ、外乱を含む連続状態モデルに対する新しい抽象的制御法である。
論文 参考訳(メタデータ) (2022-10-12T07:57:03Z) - Sampling-Based Robust Control of Autonomous Systems with Non-Gaussian
Noise [59.47042225257565]
雑音分布の明示的な表現に依存しない新しい計画法を提案する。
まず、連続系を離散状態モデルに抽象化し、状態間の確率的遷移によってノイズを捕捉する。
いわゆる区間マルコフ決定過程(iMDP)の遷移確率区間におけるこれらの境界を捉える。
論文 参考訳(メタデータ) (2021-10-25T06:18:55Z) - Gaussian Process-based Min-norm Stabilizing Controller for
Control-Affine Systems with Uncertain Input Effects and Dynamics [90.81186513537777]
本稿では,この問題の制御・アフィン特性を捉えた新しい化合物カーネルを提案する。
この結果の最適化問題は凸であることを示し、ガウス過程に基づく制御リャプノフ関数第二次コーンプログラム(GP-CLF-SOCP)と呼ぶ。
論文 参考訳(メタデータ) (2020-11-14T01:27:32Z) - Policy Learning of MDPs with Mixed Continuous/Discrete Variables: A Case
Study on Model-Free Control of Markovian Jump Systems [3.3343656101775365]
本稿では、ポリシーに基づく強化学習のための新しいベンチマークとして、未知(離散時間)のMJLSを制御する問題について紹介する。
従来の線形二次レギュレータ (LQR) と比較すると,提案手法は特殊ハイブリッドMDPに繋がる。
論文 参考訳(メタデータ) (2020-06-04T20:09:20Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。