論文の概要: Adaptive Human Trajectory Prediction via Latent Corridors
- arxiv url: http://arxiv.org/abs/2312.06653v1
- Date: Mon, 11 Dec 2023 18:59:12 GMT
- ステータス: 処理完了
- システム内更新日: 2023-12-12 14:08:20.763973
- Title: Adaptive Human Trajectory Prediction via Latent Corridors
- Title(参考訳): 潜在回廊による適応的人軌道予測
- Authors: Neerja Thakkar, Karttikeya Mangalam, Andrea Bajcsy, Jitendra Malik
- Abstract要約: シーン固有の適応軌道予測の問題を定式化する。
本稿では,潜伏回廊と呼ばれる即時チューニングにインスパイアされた新しい適応手法を提案する。
0.1%の追加モデルパラメータでは、MOTシンスシミュレーションデータの改善が23.9%、MOTおよびワイルドトラックにおけるADEが16.4%となる。
- 参考スコア(独自算出の注目度): 53.67166824262205
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Human trajectory prediction is typically posed as a zero-shot generalization
problem: a predictor is learnt on a dataset of human motion in training scenes,
and then deployed on unseen test scenes. While this paradigm has yielded
tremendous progress, it fundamentally assumes that trends in human behavior
within the deployment scene are constant over time. As such, current prediction
models are unable to adapt to scene-specific transient human behaviors, such as
crowds temporarily gathering to see buskers, pedestrians hurrying through the
rain and avoiding puddles, or a protest breaking out. We formalize the problem
of scene-specific adaptive trajectory prediction and propose a new adaptation
approach inspired by prompt tuning called latent corridors. By augmenting the
input of any pre-trained human trajectory predictor with learnable image
prompts, the predictor can improve in the deployment scene by inferring trends
from extremely small amounts of new data (e.g., 2 humans observed for 30
seconds). With less than 0.1% additional model parameters, we see up to 23.9%
ADE improvement in MOTSynth simulated data and 16.4% ADE in MOT and Wildtrack
real pedestrian data. Qualitatively, we observe that latent corridors imbue
predictors with an awareness of scene geometry and scene-specific human
behaviors that non-adaptive predictors struggle to capture. The project website
can be found at https://neerja.me/atp_latent_corridors/.
- Abstract(参考訳): 人間の軌道予測は、通常ゼロショットの一般化問題として、訓練シーンにおける人間の動きのデータセットから学習され、未知のテストシーンに展開される。
このパラダイムは大きな進歩をもたらしたが、基本的には、デプロイメントシーンにおける人間の行動の傾向は、時間とともに一定である、と仮定している。
このように、現在の予測モデルは、一時的に集まる群衆や、雨の中を急いでいる歩行者、水たまりを避けたり、抗議活動など、シーン固有の一時的な人間の行動に適応できない。
本稿では,シーン固有の適応軌道予測の問題を形式化し,潜時廊下と呼ばれる即時チューニングにヒントを得た新しい適応手法を提案する。
学習可能な画像プロンプトにより、事前訓練されたヒト軌道予測装置の入力を増強することにより、非常に少量の新しいデータ(例えば、30秒間観察された2人の人間)の傾向を推測することにより、展開シーンを改善することができる。
0.1%の追加モデルパラメータでは、MOTSynthのシミュレーションデータの改善が23.9%、MOTおよびWildtrackにおけるADEが16.4%となる。
定性的には,非適応的予測者が捕獲に苦慮するシーン幾何学とシーン固有の人間の行動に意識を抱く潜伏廊下は,予測者によって予測される。
プロジェクトのwebサイトはhttps://neerja.me/atp_latent_corridors/にある。
関連論文リスト
- Evaluating Human Trajectory Prediction with Metamorphic Testing [15.836913530330786]
人間の軌道の予測は、現実世界で行動する自律システムの計画において重要である。
予測は将来の軌道と正確に一致しない。
メタモルフィックテストのヒト軌道予測への応用について検討する。
論文 参考訳(メタデータ) (2024-07-26T14:10:14Z) - Humanoid Locomotion as Next Token Prediction [84.21335675130021]
我々のモデルは感覚運動軌道の自己回帰予測によって訓練された因果変換器である。
われわれのモデルでは、フルサイズのヒューマノイドがサンフランシスコでゼロショットで歩けることが示されている。
われわれのモデルは、わずか27時間の歩行データで訓練された場合でも現実世界に移行でき、後方歩行のような訓練中に見えないコマンドを一般化することができる。
論文 参考訳(メタデータ) (2024-02-29T18:57:37Z) - Social-Transmotion: Promptable Human Trajectory Prediction [65.80068316170613]
Social-Transmotionは、多種多様な視覚的手がかりを利用して人間の行動を予測する、汎用トランスフォーマーベースのモデルである。
提案手法は,JTA,JRDB,歩行者,道路交通のサイクリスト,ETH-UCYなど,複数のデータセットで検証されている。
論文 参考訳(メタデータ) (2023-12-26T18:56:49Z) - Robots That Can See: Leveraging Human Pose for Trajectory Prediction [30.919756497223343]
本研究では,人間中心環境における未来の軌道を予測するためのトランスフォーマーアーキテクチャを提案する。
結果として得られたモデルは、将来の人間の軌道予測に固有の不確実性を捉えている。
我々は,限られた履歴データを持つ新しいエージェントを誤りの主な要因として同定し,予測誤差を低減するために3次元骨格ポーズの相補的な性質を実証する。
論文 参考訳(メタデータ) (2023-09-29T13:02:56Z) - Staged Contact-Aware Global Human Motion Forecasting [7.930326095134298]
バーチャルリアリティー、ロボティクス、スポーツなどの多様体応用には、シーン認識のグローバルな人間の動き予測が不可欠である。
本稿では,3次元環境下でのグローバルな人間の動きを予測するための新しい3段階パイプラインSTAGを提案する。
STAGは、シーン認識のGTA-IMデータセット上で、ポーズと軌道予測の全体的な1.8%と16.2%の改善を達成する。
論文 参考訳(メタデータ) (2023-09-16T10:47:48Z) - Forecasting Human Trajectory from Scene History [51.72069374835107]
我々は,暗黙の場面の規則性から学習することで,将来の軌跡を予測することを提案する。
本研究では,シーン履歴情報を歴史的グループ軌跡と個々人のインタラクションの2つのタイプに分類する。
本稿では,シーン履歴をシンプルかつ効果的なアプローチで活用する,SHENet(Scene History Excavating Network)を提案する。
論文 参考訳(メタデータ) (2022-10-17T03:56:02Z) - Towards Robust Human Trajectory Prediction in Raw Videos [8.301214274565819]
生ビデオにおける人間の軌道予測の問題について検討する。
予測精度は,種々のトラッキングエラーの影響を受けやすいことを示す。
本稿では,予測整合性を時間とともに強制することにより,トラッキング障害を修正するための簡易かつ効果的な手法を提案する。
論文 参考訳(メタデータ) (2021-08-18T17:27:26Z) - SGCN:Sparse Graph Convolution Network for Pedestrian Trajectory
Prediction [64.16212996247943]
歩行者軌道予測のためのスパースグラフ畳み込みネットワーク(SGCN)を提案する。
具体的には、SGCNはスパース指向の相互作用をスパース指向の空間グラフと明確にモデル化し、適応的な相互作用歩行者を捉える。
可視化は,歩行者の適応的相互作用とその運動特性を捉えることができることを示す。
論文 参考訳(メタデータ) (2021-04-04T03:17:42Z) - Safety-Oriented Pedestrian Motion and Scene Occupancy Forecasting [91.69900691029908]
我々は、個々の動きとシーン占有マップの両方を予測することを提唱する。
歩行者の相対的な空間情報を保存するScene-Actor Graph Neural Network (SA-GNN)を提案する。
2つの大規模な実世界のデータセットで、我々のシーン占有率予測が最先端のモーション予測手法よりも正確でより校正されていることを示した。
論文 参考訳(メタデータ) (2021-01-07T06:08:21Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。