論文の概要: IoU-Enhanced Attention for End-to-End Task Specific Object Detection
- arxiv url: http://arxiv.org/abs/2209.10391v1
- Date: Wed, 21 Sep 2022 14:36:18 GMT
- ステータス: 処理完了
- システム内更新日: 2022-09-22 16:34:38.045905
- Title: IoU-Enhanced Attention for End-to-End Task Specific Object Detection
- Title(参考訳): タスク固有オブジェクト検出のためのIoU拡張アテンション
- Authors: Jing Zhao, Shengjian Wu, Li Sun, Qingli Li
- Abstract要約: R-CNNは画像に密着したアンカーボックスやグリッドポイントを使わずに有望な結果が得られる。
クエリとアテンション領域の間のスパースの性質と1対1の関係のため、自己注意に大きく依存する。
本稿では,自己注意における値ルーティングの先行として,異なるボックス間でIoUを使用することを提案する。
- 参考スコア(独自算出の注目度): 17.617133414432836
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Without densely tiled anchor boxes or grid points in the image, sparse R-CNN
achieves promising results through a set of object queries and proposal boxes
updated in the cascaded training manner. However, due to the sparse nature and
the one-to-one relation between the query and its attending region, it heavily
depends on the self attention, which is usually inaccurate in the early
training stage. Moreover, in a scene of dense objects, the object query
interacts with many irrelevant ones, reducing its uniqueness and harming the
performance. This paper proposes to use IoU between different boxes as a prior
for the value routing in self attention. The original attention matrix
multiplies the same size matrix computed from the IoU of proposal boxes, and
they determine the routing scheme so that the irrelevant features can be
suppressed. Furthermore, to accurately extract features for both classification
and regression, we add two lightweight projection heads to provide the dynamic
channel masks based on object query, and they multiply with the output from
dynamic convs, making the results suitable for the two different tasks. We
validate the proposed scheme on different datasets, including MS-COCO and
CrowdHuman, showing that it significantly improves the performance and
increases the model convergence speed.
- Abstract(参考訳): 画像に密着したアンカーボックスやグリッドポイントがなければ、スパースR-CNNは、一連のオブジェクトクエリと提案ボックスをカスケードされたトレーニング方法で更新することで、有望な結果を達成する。
しかし、クエリーと出席地域との関係があいまいな点と1対1の関係のため、初期の訓練段階では不正確である自己の注意に大きく依存する。
さらに、高密度オブジェクトのシーンでは、オブジェクトクエリは多くの無関係なものと相互作用し、そのユニークさを減らし、パフォーマンスを損なう。
本稿では,自己注意における値ルーティングの先行として,異なるボックス間でIoUを使用することを提案する。
元の注目行列は、提案ボックスのIoUから計算された同じ大きさの行列を乗算し、無関係な特徴を抑えるためにルーティング方式を決定する。
さらに,分類と回帰の両方の特徴を正確に抽出するために,オブジェクトクエリに基づく動的チャネルマスクを提供するために,2つの軽量なプロジェクションヘッドを追加し,動的convからの出力を乗算し,その結果を2つの異なるタスクに適合させる。
提案手法は,MS-COCO や CrowdHuman など様々なデータセット上で検証され,性能が大幅に向上し,モデル収束速度が向上することを示す。
関連論文リスト
- Mutually-Aware Feature Learning for Few-Shot Object Counting [20.623402944601775]
追加のトレーニングを必要とせずに、与えられた例に基づいてクエリイメージに対象オブジェクトをカウントすることを目的としている。
本稿では,質問文と模範的特徴を相互に認識する,MAFEA(Mutually-Aware FEAture Learning)という新しいフレームワークを提案する。
本モデルでは, FSCD-LVIS と FSC-147 の2つのベンチマークにおいて, 目標混乱の程度を著しく低減し, 新たな最先端性能を実現する。
論文 参考訳(メタデータ) (2024-08-19T06:46:24Z) - Semantics Meets Temporal Correspondence: Self-supervised Object-centric Learning in Videos [63.94040814459116]
自己教師付き手法は、高レベルの意味論と低レベルの時間対応の学習において顕著な進歩を見せている。
融合した意味特徴と対応地図の上に,意味認識型マスキングスロットアテンションを提案する。
我々は、時間的コヒーレントなオブジェクト中心表現を促進するために、セマンティックおよびインスタンスレベルの時間的一貫性を自己スーパービジョンとして採用する。
論文 参考訳(メタデータ) (2023-08-19T09:12:13Z) - Spatial-Temporal Graph Enhanced DETR Towards Multi-Frame 3D Object Detection [54.041049052843604]
STEMDは,多フレーム3Dオブジェクト検出のためのDETRのようなパラダイムを改良した,新しいエンドツーエンドフレームワークである。
まず、オブジェクト間の空間的相互作用と複雑な時間的依存をモデル化するために、空間的時間的グラフアテンションネットワークを導入する。
最後に、ネットワークが正のクエリと、ベストマッチしない他の非常に類似したクエリを区別することが課題となる。
論文 参考訳(メタデータ) (2023-07-01T13:53:14Z) - ParaFormer: Parallel Attention Transformer for Efficient Feature
Matching [8.552303361149612]
本稿ではParaFormerという新しい並列アテンションモデルを提案する。
振幅と位相という概念を通じて特徴とキーポイントの位置を融合させ、平行して自己と横断性を統合する。
ホモグラフィー推定、ポーズ推定、画像マッチングなど様々な応用実験により、ParaFormerが最先端の性能を達成することを示す。
効率のよいParaFormer-Uは、既存のアテンションベースモデルの50%未満のFLOPで同等のパフォーマンスを達成する。
論文 参考訳(メタデータ) (2023-03-02T03:29:16Z) - OST: Efficient One-stream Network for 3D Single Object Tracking in Point Clouds [6.661881950861012]
本稿では,従来のシームズネットワークで発生した相関操作を回避するために,インスタンスレベルのエンコーディングの強みを活かした新しい一ストリームネットワークを提案する。
提案手法は,クラス固有のトラッキングだけでなく,より少ない計算と高い効率でクラスに依存しないトラッキングを実現する。
論文 参考訳(メタデータ) (2022-10-16T12:31:59Z) - Complex-Valued Autoencoders for Object Discovery [62.26260974933819]
本稿では,オブジェクト中心表現に対する分散アプローチとして,複合オートエンコーダを提案する。
このシンプルで効率的なアプローチは、単純なマルチオブジェクトデータセット上の等価な実数値オートエンコーダよりも、より良い再構成性能を実現することを示す。
また、2つのデータセット上のSlotAttentionモデルと競合しないオブジェクト発見性能を実現し、SlotAttentionが失敗する第3のデータセットでオブジェクトをアンタングルする。
論文 参考訳(メタデータ) (2022-04-05T09:25:28Z) - Online Multiple Object Tracking with Cross-Task Synergy [120.70085565030628]
位置予測と埋め込み結合の相乗効果を考慮した新しい統一モデルを提案する。
この2つのタスクは、時間認識対象の注意と注意の注意、およびアイデンティティ認識メモリ集約モデルによってリンクされる。
論文 参考訳(メタデータ) (2021-04-01T10:19:40Z) - Single Object Tracking through a Fast and Effective Single-Multiple
Model Convolutional Neural Network [0.0]
最近の最先端の(SOTA)アプローチは、エリア内の他のオブジェクトとターゲットを区別するために重い構造を持つマッチングネットワークを取ることに基づいて提案されています。
本稿では,これまでのアプローチとは対照的に,一つのショットで物体の位置を識別できる特殊なアーキテクチャを提案する。
提示されたトラッカーは、1080tiで最大120 fps$の超高速で、挑戦的な状況でsomaと比較してパフォーマンスする。
論文 参考訳(メタデータ) (2021-03-28T11:02:14Z) - Dynamic Refinement Network for Oriented and Densely Packed Object
Detection [75.29088991850958]
本稿では,機能選択モジュール (FSM) と動的改善ヘッド (DRH) の2つの新しいコンポーネントからなる動的精細化ネットワークを提案する。
我々のFSMは、ニューロンがターゲットオブジェクトの形状や向きに応じて受容野を調整できるのに対して、DRHはオブジェクト認識の方法で動的に予測を洗練させる。
我々は、DOTA、HRSC2016、SKU110K、および我々のSKU110K-Rデータセットを含むいくつかの公開ベンチマークで定量的評価を行う。
論文 参考訳(メタデータ) (2020-05-20T11:35:50Z) - A Unified Object Motion and Affinity Model for Online Multi-Object
Tracking [127.5229859255719]
オブジェクトの動きと親和性モデルを単一のネットワークに統一する新しいMOTフレームワークUMAを提案する。
UMAは、単一物体追跡とメートル法学習をマルチタスク学習により統合された三重項ネットワークに統合する。
我々は,タスク認識機能学習を促進するために,タスク固有のアテンションモジュールを装備する。
論文 参考訳(メタデータ) (2020-03-25T09:36:43Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。