論文の概要: IA-MOT: Instance-Aware Multi-Object Tracking with Motion Consistency
- arxiv url: http://arxiv.org/abs/2006.13458v1
- Date: Wed, 24 Jun 2020 03:53:36 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-17 12:50:38.535499
- Title: IA-MOT: Instance-Aware Multi-Object Tracking with Motion Consistency
- Title(参考訳): ia-mot: 動作一貫性を備えたインスタンス対応マルチオブジェクトトラッキング
- Authors: Jiarui Cai, Yizhou Wang, Haotian Zhang, Hung-Min Hsu, Chengqian Ma,
Jenq-Neng Hwang
- Abstract要約: IA-MOT(Instance-Aware MOT)は、静止カメラまたは移動カメラで複数の物体を追跡できる。
提案手法は,CVPR 2020ワークショップにおけるBMTTチャレンジのトラック3で優勝した。
- 参考スコア(独自算出の注目度): 40.354708148590696
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Multiple object tracking (MOT) is a crucial task in computer vision society.
However, most tracking-by-detection MOT methods, with available detected
bounding boxes, cannot effectively handle static, slow-moving and fast-moving
camera scenarios simultaneously due to ego-motion and frequent occlusion. In
this work, we propose a novel tracking framework, called "instance-aware MOT"
(IA-MOT), that can track multiple objects in either static or moving cameras by
jointly considering the instance-level features and object motions. First,
robust appearance features are extracted from a variant of Mask R-CNN detector
with an additional embedding head, by sending the given detections as the
region proposals. Meanwhile, the spatial attention, which focuses on the
foreground within the bounding boxes, is generated from the given instance
masks and applied to the extracted embedding features. In the tracking stage,
object instance masks are aligned by feature similarity and motion consistency
using the Hungarian association algorithm. Moreover, object re-identification
(ReID) is incorporated to recover ID switches caused by long-term occlusion or
missing detection. Overall, when evaluated on the MOTS20 and KITTI-MOTS
dataset, our proposed method won the first place in Track 3 of the BMTT
Challenge in CVPR2020 workshops.
- Abstract(参考訳): 複数物体追跡(MOT)はコンピュータビジョン社会において重要な課題である。
しかし、検出可能な境界ボックスを持つ追跡検出mot法は、エゴモーションと頻繁な咬合のため、静的、スローモーション、高速移動カメラのシナリオを効果的に処理できない。
本研究では,インスタンスレベルの特徴とオブジェクトの動きを協調的に考慮し,静止カメラと移動カメラの両方で複数の物体を追跡できる,IA-MOT (Instance-Aware MOT) と呼ばれる新しいトラッキングフレームワークを提案する。
まず,Mask R-CNN検出器と追加の埋め込みヘッドから,所定の検出を領域提案として送信することにより,ロバストな外観特徴を抽出する。
一方、境界ボックス内の前景に焦点を当てた空間的注意は、与えられたインスタンスマスクから生成され、抽出された埋め込み特徴に適用される。
追跡段階では、オブジェクトのインスタンスマスクはハンガリーのアソシエーションアルゴリズムを用いて特徴類似性と動きの一貫性によって整列される。
さらに、オブジェクト再識別(ReID)を組み込んで、長期閉塞や欠落検出によるIDスイッチを復元する。
CVPR2020ワークショップにおけるBMTTチャレンジのトラック3において,MOTS20とKITTI-MOTSデータセットを用いて評価を行った。
関連論文リスト
- VOVTrack: Exploring the Potentiality in Videos for Open-Vocabulary Object Tracking [61.56592503861093]
オープンボキャブラリオブジェクト検出(OVD)とマルチオブジェクトトラッキング(MOT)の複雑さを両立させる。
OVMOT の既存のアプローチは、OVD と MOT の方法論を別個のモジュールとして統合することが多く、主に画像中心のレンズによる問題に焦点を当てている。
VOVTrackは、MOTとビデオ中心トレーニングに関連するオブジェクト状態を統合する新しい手法であり、ビデオオブジェクト追跡の観点からこの問題に対処する。
論文 参考訳(メタデータ) (2024-10-11T05:01:49Z) - STCMOT: Spatio-Temporal Cohesion Learning for UAV-Based Multiple Object Tracking [13.269416985959404]
無人航空機(UAV)ビデオにおける複数物体追跡(MOT)は、コンピュータビジョンにおける多様な用途において重要である。
時空間結合型多目的追跡フレームワーク(STCMOT)を提案する。
歴史的埋め込み機能を用いて,ReIDの表現と検出機能を逐次的にモデル化する。
我々のフレームワークはMOTAとIDF1メトリクスで新しい最先端のパフォーマンスを設定します。
論文 参考訳(メタデータ) (2024-09-17T14:34:18Z) - ADA-Track: End-to-End Multi-Camera 3D Multi-Object Tracking with Alternating Detection and Association [15.161640917854363]
多視点カメラによる3D MOTのための新しいエンドツーエンドフレームワークであるADA-Trackを紹介する。
エッジ拡張型クロスアテンションに基づく学習可能なデータアソシエーションモジュールを提案する。
我々は、この関連モジュールをDTRベースの3D検出器のデコーダ層に統合する。
論文 参考訳(メタデータ) (2024-05-14T19:02:33Z) - SpikeMOT: Event-based Multi-Object Tracking with Sparse Motion Features [52.213656737672935]
SpikeMOTはイベントベースのマルチオブジェクトトラッカーである。
SpikeMOTはスパイクニューラルネットワークを使用して、オブジェクトに関連するイベントストリームからスパーステンポラルな特徴を抽出する。
論文 参考訳(メタデータ) (2023-09-29T05:13:43Z) - Object-Centric Multiple Object Tracking [124.30650395969126]
本稿では,多目的追跡パイプラインのためのビデオオブジェクト中心モデルを提案する。
オブジェクト中心のスロットを検出出力に適応するインデックスマージモジュールと、オブジェクトメモリモジュールで構成される。
オブジェクト中心学習に特化して、オブジェクトのローカライゼーションと機能バインディングのためのスパース検出ラベルしか必要としない。
論文 参考訳(メタデータ) (2023-09-01T03:34:12Z) - Occlusion-Aware Detection and Re-ID Calibrated Network for Multi-Object
Tracking [38.36872739816151]
検出器内のOAA(Occlusion-Aware Attention)モジュールは、隠蔽された背景領域を抑えながらオブジェクトの特徴を強調する。
OAAは、隠蔽される可能性のある物体の検出器を強化する変調器として機能する。
最適輸送問題に基づくRe-ID埋め込みマッチングブロックを設計する。
論文 参考訳(メタデータ) (2023-08-30T06:56:53Z) - End-to-end Tracking with a Multi-query Transformer [96.13468602635082]
マルチオブジェクトトラッキング(MOT)は、時間とともにシーン内のオブジェクトの位置、外観、アイデンティティを同時に推論する必要がある課題である。
本研究の目的は、トラッキング・バイ・ディテクト・アプローチを超えて、未知のオブジェクト・クラスに対してもよく機能するクラスに依存しないトラッキングへと移行することである。
論文 参考訳(メタデータ) (2022-10-26T10:19:37Z) - Dense Scene Multiple Object Tracking with Box-Plane Matching [73.54369833671772]
マルチオブジェクトトラッキング(MOT)はコンピュータビジョンにおいて重要なタスクである。
密集したシーンにおけるMOT性能を改善するために,Box-Plane Matching (BPM)法を提案する。
3つのモジュールの有効性により、ACM MM Grand Challenge HiEve 2020において、私たちのチームはトラック1のリーダーボードで1位を獲得しました。
論文 参考訳(メタデータ) (2020-07-30T16:39:22Z) - Joint Detection and Tracking in Videos with Identification Features [36.55599286568541]
本稿では,ビデオ検出,追跡,再識別機能の最初の共同最適化を提案する。
提案手法はMOTの最先端に到達し,オンライントラッカーにおけるUA-DETRAC'18追跡課題のうち,第1位,第3位にランクインした。
論文 参考訳(メタデータ) (2020-05-21T21:06:40Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。