論文の概要: LLM-Agents Driven Automated Simulation Testing and Analysis of small Uncrewed Aerial Systems
- arxiv url: http://arxiv.org/abs/2501.11864v1
- Date: Tue, 21 Jan 2025 03:42:21 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-01-22 14:24:34.251934
- Title: LLM-Agents Driven Automated Simulation Testing and Analysis of small Uncrewed Aerial Systems
- Title(参考訳): LLM-Agents-Driven Automated Simulation Testing and Analysis of Small Uncrewed Aerial Systems (特集:エアロゾル)
- Authors: Venkata Sai Aswath Duvvuru, Bohan Zhang, Michael Vierhauser, Ankit Agrawal,
- Abstract要約: 小型無人航空機の正確な挙動を検証するためには, 粗いシミュレーション試験が重要である。
開発者をサポートするために様々なsUASシミュレーションツールが存在するが、シミュレーションテストの作成、実行、分析のプロセス全体が、手作業で面倒な作業である。
複数のLLMエージェントが協調してsUASシミュレーションテストプロセスをサポートするフレームワークであるAutoSimTestを提案する。
- 参考スコア(独自算出の注目度): 11.183147511573717
- License:
- Abstract: Thorough simulation testing is crucial for validating the correct behavior of small Uncrewed Aerial Systems (sUAS) across multiple scenarios, including adverse weather conditions (such as wind, and fog), diverse settings (hilly terrain, or urban areas), and varying mission profiles (surveillance, tracking). While various sUAS simulation tools exist to support developers, the entire process of creating, executing, and analyzing simulation tests remains a largely manual and cumbersome task. Developers must identify test scenarios, set up the simulation environment, integrate the System under Test (SuT) with simulation tools, formulate mission plans, and collect and analyze results. These labor-intensive tasks limit the ability of developers to conduct exhaustive testing across a wide range of scenarios. To alleviate this problem, in this paper, we propose AutoSimTest, a Large Language Model (LLM)-driven framework, where multiple LLM agents collaborate to support the sUAS simulation testing process. This includes: (1) creating test scenarios that subject the SuT to unique environmental contexts; (2) preparing the simulation environment as per the test scenario; (3) generating diverse sUAS missions for the SuT to execute; and (4) analyzing simulation results and providing an interactive analytics interface. Further, the design of the framework is flexible for creating and testing scenarios for a variety of sUAS use cases, simulation tools, and SuT input requirements. We evaluated our approach by (a) conducting simulation testing of PX4 and ArduPilot flight-controller-based SuTs, (b) analyzing the performance of each agent, and (c) gathering feedback from sUAS developers. Our findings indicate that AutoSimTest significantly improves the efficiency and scope of the sUAS testing process, allowing for more comprehensive and varied scenario evaluations while reducing the manual effort.
- Abstract(参考訳): 詳細なシミュレーションテストは、悪天候(風や霧など)、様々な設定(丘陵地、都市部)、様々なミッションプロファイル(監視、追跡)など、さまざまなシナリオにおいて、小型無人航空機システム(sUAS)の正しい挙動を検証するために不可欠である。
開発者をサポートするために様々なsUASシミュレーションツールが存在するが、シミュレーションテストの作成、実行、分析のプロセスは、大部分が手作業で面倒な作業である。
開発者はテストシナリオを特定し、シミュレーション環境を設定し、シミュレーションツールとシステム・アンダー・テスト(SuT)を統合し、ミッション計画を定式化し、結果を収集し分析する必要がある。
これらの労働集約的なタスクは、開発者が幅広いシナリオで徹底的なテストを実行する能力を制限します。
本稿では,LLM(Large Language Model)駆動のフレームワークであるAutoSimTestを提案し,複数のLLMエージェントが協調してsUASシミュレーションテストプロセスをサポートする。
これには、(1)SuTに固有の環境条件を課すテストシナリオを作成すること、(2)テストシナリオに従ってシミュレーション環境を作成すること、(3)SuTが実行する多様なsUASミッションを生成すること、(4)シミュレーション結果を分析し、対話的な分析インターフェースを提供することが含まれる。
さらに、フレームワークの設計は、様々なsUASユースケース、シミュレーションツール、SuT入力要求のシナリオの作成とテストに柔軟である。
私たちは我々のアプローチを評価した
(a)PX4とArduPilotの飛行制御系SuTのシミュレーション試験
b)各エージェントのパフォーマンスを分析し、
(c) sUAS開発者からのフィードバックを集める。
以上の結果から,AutoSimTestはsUASテストプロセスの効率とスコープを大幅に改善し,より包括的で多様なシナリオ評価を実現し,手作業の軽減を実現している。
関連論文リスト
- Correlation of Software-in-the-Loop Simulation with Physical Testing for Autonomous Driving [0.0]
本稿では,社内で開発されたSILシミュレーションツールチェーンの検証事例について述べる。
テストトラックをSILシミュレーションと整合させるため,同期手法を提案する。
提案手法の有効性を示すための予備的な結果を示す。
論文 参考訳(メタデータ) (2024-06-05T08:11:10Z) - Coupled Requirements-driven Testing of CPS: From Simulation To Reality [5.7736484832934325]
CPS(Cyber-Physical Systems)の障害は、物理的なインフラや人間を傷つける深刻な事故を引き起こす可能性がある。
現在のシミュレーションとフィールドテストの実践、特に小型無人航空システム(sUAS)の領域では、アドホックであり、完全に構造化されたテストプロセスが欠如している。
我々はCPSを検証するための初期フレームワークを開発し、特にsUASとロボットアプリケーションに焦点を当てた。
論文 参考訳(メタデータ) (2024-03-24T20:32:12Z) - Waymax: An Accelerated, Data-Driven Simulator for Large-Scale Autonomous
Driving Research [76.93956925360638]
Waymaxは、マルチエージェントシーンにおける自動運転のための新しいデータ駆動シミュレータである。
TPU/GPUなどのハードウェアアクセラレータで完全に動作し、トレーニング用のグラフ内シミュレーションをサポートする。
我々は、一般的な模倣と強化学習アルゴリズムのスイートをベンチマークし、異なる設計決定に関するアブレーション研究を行った。
論文 参考訳(メタデータ) (2023-10-12T20:49:15Z) - A Requirements-Driven Platform for Validating Field Operations of Small
Uncrewed Aerial Vehicles [48.67061953896227]
DroneReqValidator (DRV)は、sUAS開発者が運用コンテキストを定義し、複数のsUASミッション要件を設定し、安全性特性を指定し、独自のsUASアプリケーションを高忠実な3D環境にデプロイすることを可能にする。
DRVモニタリングシステムは、sUASと環境からランタイムデータを収集し、安全特性のコンプライアンスを分析し、違反をキャプチャする。
論文 参考訳(メタデータ) (2023-07-01T02:03:49Z) - Near-optimal Policy Identification in Active Reinforcement Learning [84.27592560211909]
AE-LSVI はカーネル化された最小二乗値 RL (LSVI) アルゴリズムの新しい変種であり、楽観主義と悲観主義を組み合わせて活発な探索を行う。
AE-LSVIは初期状態に対するロバスト性が必要な場合、様々な環境で他のアルゴリズムよりも優れていることを示す。
論文 参考訳(メタデータ) (2022-12-19T14:46:57Z) - Synthetic Data-Based Simulators for Recommender Systems: A Survey [55.60116686945561]
本調査は,モデリングとシミュレーションの分野における最近のトレンドを包括的に概観することを目的としている。
まずは、シミュレーターを実装するフレームワークの開発の背後にあるモチベーションから始めます。
我々は,既存のシミュレータの機能,近似,産業的有効性に基づいて,新しい一貫した一貫した分類を行う。
論文 参考訳(メタデータ) (2022-06-22T19:33:21Z) - Metaphorical User Simulators for Evaluating Task-oriented Dialogue
Systems [80.77917437785773]
タスク指向対話システム(TDS)は、主にオフラインまたは人間による評価によって評価される。
本稿では,エンド・ツー・エンドのTDS評価のためのメタファ型ユーザシミュレータを提案する。
また,異なる機能を持つ対話システムなどの変種を生成するためのテスタベースの評価フレームワークを提案する。
論文 参考訳(メタデータ) (2022-04-02T05:11:03Z) - Digital Twins Are Not Monozygotic -- Cross-Replicating ADAS Testing in
Two Industry-Grade Automotive Simulators [13.386879259549305]
SBSTは2つのシミュレータで重要なテストシナリオを効率的かつ効率的に生成できることを示した。
2つのシミュレータで同じテストシナリオを実行すると、テスト出力の詳細に顕著な違いが生じることが分かりました。
論文 参考訳(メタデータ) (2020-12-12T14:00:33Z) - A User's Guide to Calibrating Robotics Simulators [54.85241102329546]
本稿では,シミュレーションで学習したモデルやポリシーを現実世界に伝達することを目的とした,様々なアルゴリズムの研究のためのベンチマークとフレームワークを提案する。
我々は、様々なアルゴリズムの性能に関する洞察を特徴付け、提供するために、広く知られたシミュレーション環境の実験を行う。
我々の分析は、この分野の実践者にとって有用であり、sim-to-realアルゴリズムの動作と主特性について、より深い選択をすることができる。
論文 参考訳(メタデータ) (2020-11-17T22:24:26Z) - Formal Scenario-Based Testing of Autonomous Vehicles: From Simulation to
the Real World [8.498542964344987]
自動運転車の安全性のシナリオベース自動テストに対する新しいアプローチを提案する。
提案手法は,シナリオの形式的仕様と安全性特性を組み合わせた形式的手法に基づいている。
論文 参考訳(メタデータ) (2020-03-17T14:17:52Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。