論文の概要: Rethinking Trajectory Forecasting Evaluation
- arxiv url: http://arxiv.org/abs/2107.10297v1
- Date: Wed, 21 Jul 2021 18:20:03 GMT
- ステータス: 処理完了
- システム内更新日: 2021-07-23 12:56:25.944865
- Title: Rethinking Trajectory Forecasting Evaluation
- Title(参考訳): 軌道予測評価の再考
- Authors: Boris Ivanovic and Marco Pavone
- Abstract要約: 私たちは一歩後退して、現在の軌跡予測指標を批判的に評価します。
本稿では,予測が展開されているシステムにおけるパフォーマンスの指標として,タスク対応メトリクスを提案する。
- 参考スコア(独自算出の注目度): 42.228191984697006
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Forecasting the behavior of other agents is an integral part of the modern
robotic autonomy stack, especially in safety-critical scenarios with
human-robot interaction, such as autonomous driving. In turn, there has been a
significant amount of interest and research in trajectory forecasting,
resulting in a wide variety of approaches. Common to all works, however, is the
use of the same few accuracy-based evaluation metrics, e.g., displacement error
and log-likelihood. While these metrics are informative, they are task-agnostic
and predictions that are evaluated as equal can lead to vastly different
outcomes, e.g., in downstream planning and decision making. In this work, we
take a step back and critically evaluate current trajectory forecasting
metrics, proposing task-aware metrics as a better measure of performance in
systems where prediction is being deployed. We additionally present one example
of such a metric, incorporating planning-awareness within existing trajectory
forecasting metrics.
- Abstract(参考訳): 他のエージェントの振る舞いを予測することは、特に自律運転のような人間とロボットの相互作用を伴う安全クリティカルなシナリオにおいて、現代ロボット自律スタックの不可欠な部分である。
結果として、軌道予測に対するかなりの関心と研究が行われ、様々なアプローチが生み出された。
しかし、すべての作業に共通しているのは、変位誤差やログライクな状態など、精度に基づいた測定基準がほとんどないことだ。
これらの指標は情報的であるが、それらはタスクに依存しず、等しく評価される予測は、下流の計画や意思決定など、非常に異なる結果をもたらす。
本研究では,現在の軌道予測指標を一歩引いて批判的に評価し,予測がデプロイされているシステムの性能の指標としてタスク対応メトリクスを提案する。
さらに、既存の軌道予測メトリクスに計画認識機能を組み込んだメトリクスの例も提示する。
関連論文リスト
- JRDB-Traj: A Dataset and Benchmark for Trajectory Forecasting in Crowds [79.00975648564483]
ロボット工学、自動運転車、ナビゲーションなどの分野で使用される軌道予測モデルは、現実のシナリオにおいて課題に直面している。
このデータセットは、ロボットの観点から、すべてのエージェント、シーンイメージ、ポイントクラウドの位置を含む包括的なデータを提供する。
本研究の目的は,ロボットに対するエージェントの将来の位置を,生の感覚入力データを用いて予測することである。
論文 参考訳(メタデータ) (2023-11-05T18:59:31Z) - Evaluating Pedestrian Trajectory Prediction Methods with Respect to Autonomous Driving [0.9217021281095907]
本稿では,単一軌跡生成の文脈における歩行者軌跡予測における技術の現状を評価する。
評価は、平均変位誤差(ADE)と最終変位誤差(FDE)を報告した広く使われているETH/UCYデータセット上で行われる。
論文 参考訳(メタデータ) (2023-08-09T19:21:50Z) - Rethinking the Open-Loop Evaluation of End-to-End Autonomous Driving in
nuScenes [38.43491956142818]
計画課題は、内部意図と外部環境の両方からの入力に基づいて、エゴ車両の軌道を予測することである。
既存の研究の多くは、予測された軌道と地上の真実との衝突率とL2誤差を用いて、nuScenesデータセット上での性能を評価する。
本稿では,これらの既存の評価指標を再評価し,異なる手法の優越性を正確に測定するかどうかを検討する。
我々の単純な手法は、nuScenesデータセットと他の知覚に基づく手法と同じようなエンド・ツー・エンドの計画性能を実現し、平均L2誤差を約20%削減する。
論文 参考訳(メタデータ) (2023-05-17T17:59:11Z) - Towards trustworthy multi-modal motion prediction: Holistic evaluation
and interpretability of outputs [3.5240925434839054]
我々は,アウトプットの評価基準,堅牢性,解釈可能性に焦点をあてる。
マルチモーダル動作予測モデルにアタッチ可能な意図予測層を提案する。
論文 参考訳(メタデータ) (2022-10-28T14:14:22Z) - What Should I Know? Using Meta-gradient Descent for Predictive Feature
Discovery in a Single Stream of Experience [63.75363908696257]
計算強化学習は、未来の感覚の予測を通じて、エージェントの世界の知覚を構築しようとする。
この一連の作業において、オープンな課題は、エージェントがどの予測が意思決定を最も支援できるかを、無限に多くの予測から決定することである。
本稿では,エージェントが何を予測するかを学習するメタ段階的な降下過程,(2)選択した予測の見積もり,3)将来の報酬を最大化するポリシーを生成する方法を紹介する。
論文 参考訳(メタデータ) (2022-06-13T21:31:06Z) - Control-Aware Prediction Objectives for Autonomous Driving [78.19515972466063]
本研究では,制御に対する予測の下流効果を評価するための制御認識予測目標(CAPOs)を提案する。
本稿では,エージェント間の注意モデルを用いた重み付けと,予測軌跡を接地真実軌跡に交換する際の制御変動に基づく重み付けの2つの方法を提案する。
論文 参考訳(メタデータ) (2022-04-28T07:37:21Z) - Injecting Planning-Awareness into Prediction and Detection Evaluation [42.228191984697006]
私たちは一歩後退して、現在の評価指標を批判的に評価し、タスク対応メトリクスを、デプロイされるシステムのパフォーマンスのより良い測定基準として提案します。
実世界の自律運転データとともに、実世界のシミュレーション実験により、提案したタスク認識メトリクスが結果非対称性を考慮でき、モデルのクローズドループ性能をよりよく推定できることを確認した。
論文 参考訳(メタデータ) (2021-10-07T08:52:48Z) - The Importance of Prior Knowledge in Precise Multimodal Prediction [71.74884391209955]
道路にはよく定義された地形、地形、交通規則がある。
本稿では,構造的事前を損失関数として組み込むことを提案する。
実世界の自動運転データセットにおけるアプローチの有効性を実証する。
論文 参考訳(メタデータ) (2020-06-04T03:56:11Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。