論文の概要: F-Siamese Tracker: A Frustum-based Double Siamese Network for 3D Single
Object Tracking
- arxiv url: http://arxiv.org/abs/2010.11510v1
- Date: Thu, 22 Oct 2020 08:01:17 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-04 07:00:22.366490
- Title: F-Siamese Tracker: A Frustum-based Double Siamese Network for 3D Single
Object Tracking
- Title(参考訳): f-siamese tracker: 3dシングルオブジェクトトラッキングのためのフラスタムベースのダブルシャムネットワーク
- Authors: Hao Zou, Jinhao Cui, Xin Kong, Chujuan Zhang, Yong Liu, Feng Wen and
Wanlong Li
- Abstract要約: 3Dオブジェクト追跡の主な課題は、適切な3D候補を生成するための検索スペースを減らす方法である。
3Dプロポーザルに頼る代わりに、2D領域プロポーザルを生成し、それを3Dビューイングフラストラムに出力する。
我々は3次元フラストラム上でオンラインの精度検証を行い、洗練された点雲探索空間を生成する。
- 参考スコア(独自算出の注目度): 12.644452175343059
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: This paper presents F-Siamese Tracker, a novel approach for single object
tracking prominently characterized by more robustly integrating 2D and 3D
information to reduce redundant search space. A main challenge in 3D single
object tracking is how to reduce search space for generating appropriate 3D
candidates. Instead of solely relying on 3D proposals, firstly, our method
leverages the Siamese network applied on RGB images to produce 2D region
proposals which are then extruded into 3D viewing frustums. Besides, we perform
an online accuracy validation on the 3D frustum to generate refined point cloud
searching space, which can be embedded directly into the existing 3D tracking
backbone. For efficiency, our approach gains better performance with fewer
candidates by reducing search space. In addition, benefited from introducing
the online accuracy validation, for occasional cases with strong occlusions or
very sparse points, our approach can still achieve high precision, even when
the 2D Siamese tracker loses the target. This approach allows us to set a new
state-of-the-art in 3D single object tracking by a significant margin on a
sparse outdoor dataset (KITTI tracking). Moreover, experiments on 2D single
object tracking show that our framework boosts 2D tracking performance as well.
- Abstract(参考訳): F-Siamese Trackerは,より堅牢な2次元情報と3次元情報の統合により,冗長な検索空間の低減を図った,単一物体追跡のための新しい手法である。
3Dオブジェクト追跡の主な課題は、適切な3D候補を生成するための検索スペースを減らす方法である。
まず,RGB画像に印加されたSiameseネットワークを利用して2D領域の提案を生成し,それを3D表示フラストタルに出力する。
さらに,既存の3Dトラッキングバックボーンに直接組み込むことができる改良点雲探索空間を生成するために,3Dフラストラム上でオンライン精度検証を行う。
効率向上のために,提案手法は検索スペースを減らし,候補数が少ないほど性能が向上する。
また, 2d siameseトラッカが目標を失くした場合でも, 強い咬合や非常にスパースな点がある場合においても, オンライン精度検証の導入により, 精度の向上が期待できる。
このアプローチにより、スパース屋外データセット(KITTIトラッキング)にかなりのマージンで、新しい最先端の3Dオブジェクトトラッキングを設定できる。
さらに, 2次元単一オブジェクト追跡実験により, 2次元オブジェクト追跡性能も向上することを示した。
関連論文リスト
- Exploiting More Information in Sparse Point Cloud for 3D Single Object
Tracking [9.693724357115762]
3Dオブジェクトトラッキングは、3Dコンピュータビジョンにおける重要なタスクである。
点雲の空間性は、類似性を計算し、対象を見つけるのを難しくする。
本稿では3次元オブジェクト追跡のためのスパース・トゥ・デンス・トランスフォーマー・ベースのフレームワークを提案する。
論文 参考訳(メタデータ) (2022-10-02T13:38:30Z) - A Lightweight and Detector-free 3D Single Object Tracker on Point Clouds [50.54083964183614]
生のLiDARスキャンにおける物体の点雲は、通常スパースで不完全であるため、正確な目標固有検出を行うのは簡単ではない。
DMTは、複雑な3D検出器の使用を完全に除去する3Dトラッキングネットワークである。
論文 参考訳(メタデータ) (2022-03-08T17:49:07Z) - 3D Visual Tracking Framework with Deep Learning for Asteroid Exploration [22.808962211830675]
本稿では,3次元追跡のための高精度かつリアルタイムな手法について検討する。
両眼ビデオシーケンス、深度マップ、様々な小惑星の点雲を含む、新しい大規模な3D小惑星追跡データセットが提示されている。
深層学習に基づく3DトラッキングフレームワークTrack3Dを提案する。このフレームワークは,2次元単分子トラッカーと,新しい軽量アモーダル軸整合バウンディングボックスネットワークであるA3BoxNetを備える。
論文 参考訳(メタデータ) (2021-11-21T04:14:45Z) - Anchor-free 3D Single Stage Detector with Mask-Guided Attention for
Point Cloud [79.39041453836793]
我々は、点雲をアンカーフリーで検出する新しい1段3次元検出器を開発した。
ボクセルをベースとしたスパース3D特徴量からスパース2D特徴量マップに変換することでこれを克服する。
検出信頼度スコアとバウンディングボックス回帰の精度との相関性を改善するために,IoUに基づく検出信頼度再校正手法を提案する。
論文 参考訳(メタデータ) (2021-08-08T13:42:13Z) - FGR: Frustum-Aware Geometric Reasoning for Weakly Supervised 3D Vehicle
Detection [81.79171905308827]
3Dアノテーションを使わずに点雲中の車両を検出するためのフラストラム対応幾何推論(FGR)を提案する。
本手法は粗い3次元セグメンテーションと3次元バウンディングボックス推定の2段階からなる。
2Dバウンディングボックスとスパースポイントクラウドだけで、3D空間内のオブジェクトを正確に検出できます。
論文 参考訳(メタデータ) (2021-05-17T07:29:55Z) - Monocular Quasi-Dense 3D Object Tracking [99.51683944057191]
周囲の物体の将来の位置を予測し、自律運転などの多くのアプリケーションで観測者の行動を計画するためには、信頼性と正確な3D追跡フレームワークが不可欠である。
移動プラットフォーム上で撮影された2次元画像のシーケンスから,移動物体を時間とともに効果的に関連付け,その全3次元バウンディングボックス情報を推定するフレームワークを提案する。
論文 参考訳(メタデータ) (2021-03-12T15:30:02Z) - PLUME: Efficient 3D Object Detection from Stereo Images [95.31278688164646]
既存の手法では、2つのステップでこの問題に対処する: 第一深度推定を行い、その深さ推定から擬似LiDAR点雲表現を計算し、3次元空間で物体検出を行う。
この2つのタスクを同一のメトリック空間で統一するモデルを提案する。
提案手法は,既存の手法と比較して推定時間を大幅に削減し,挑戦的なKITTIベンチマークの最先端性能を実現する。
論文 参考訳(メタデータ) (2021-01-17T05:11:38Z) - Reinforced Axial Refinement Network for Monocular 3D Object Detection [160.34246529816085]
モノクロ3次元物体検出は、2次元入力画像から物体の位置と特性を抽出することを目的としている。
従来のアプローチでは、空間から3D境界ボックスをサンプリングし、対象オブジェクトと各オブジェクトの関係を推定するが、有効サンプルの確率は3D空間で比較的小さい。
我々は,まず最初の予測から始めて,各ステップで1つの3dパラメータだけを変えて,基礎的真理に向けて徐々に洗練することを提案する。
これは、いくつかのステップの後に報酬を得るポリシーを設計する必要があるため、最適化するために強化学習を採用します。
論文 参考訳(メタデータ) (2020-08-31T17:10:48Z) - JRMOT: A Real-Time 3D Multi-Object Tracker and a New Large-Scale Dataset [34.609125601292]
我々は,RGB画像と3Dポイントクラウドの情報を統合し,リアルタイムトラッキング性能を実現する新しい3DMOTシステムJRMOTを提案する。
我々の研究の一環として、新しい大規模2D+3DデータセットとベンチマークであるJRDBデータセットをリリースしました。
提案する3D MOTシステムは,一般的な2DトラッキングKITTIベンチマークにおいて,競合する手法に対する最先端性能を示す。
論文 参考訳(メタデータ) (2020-02-19T19:21:33Z) - RTM3D: Real-time Monocular 3D Detection from Object Keypoints for
Autonomous Driving [26.216609821525676]
最も成功した3D検出器は、3Dバウンディングボックスから2Dボックスへの投射制約を重要な構成要素としている。
画像空間における3次元境界ボックスの9つの視点キーポイントを予測し、3次元空間における3次元視点と2次元視点の幾何学的関係を利用して、次元、位置、方向を復元する。
提案手法は,KITTIベンチマークの最先端性能を達成しつつ,モノクロ画像の3次元検出を行う最初のリアルタイムシステムである。
論文 参考訳(メタデータ) (2020-01-10T08:29:20Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。