論文の概要: DETRs with Hybrid Matching
- arxiv url: http://arxiv.org/abs/2207.13080v1
- Date: Tue, 26 Jul 2022 17:52:14 GMT
- ステータス: 処理完了
- システム内更新日: 2022-07-27 13:06:47.409454
- Title: DETRs with Hybrid Matching
- Title(参考訳): ハイブリッドマッチングを用いたDETR
- Authors: Ding Jia and Yuhui Yuan and Haodi He and Xiaopei Wu and Haojun Yu and
Weihong Lin and Lei Sun and Chao Zhang and Han Hu
- Abstract要約: 1対1のセットマッチングは、DETRがエンドツーエンドの機能を確立するための鍵となる設計である。
1対1のセットマッチングは、正のサンプルのトレーニング効率を著しく低下させる。
本稿では,従来の1対1のマッチング分岐と1対1のマッチング損失を用いた補助クエリを組み合わせたハイブリッドマッチング方式を提案する。
- 参考スコア(独自算出の注目度): 21.63116788914251
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: One-to-one set matching is a key design for DETR to establish its end-to-end
capability, so that object detection does not require a hand-crafted NMS
(non-maximum suppression) method to remove duplicate detections. This
end-to-end signature is important for the versatility of DETR, and it has been
generalized to a wide range of visual problems, including instance/semantic
segmentation, human pose estimation, and point cloud/multi-view-images based
detection, etc. However, we note that because there are too few queries
assigned as positive samples, the one-to-one set matching significantly reduces
the training efficiency of positive samples. This paper proposes a simple yet
effective method based on a hybrid matching scheme that combines the original
one-to-one matching branch with auxiliary queries that use one-to-many matching
loss during training. This hybrid strategy has been shown to significantly
improve training efficiency and improve accuracy. In inference, only the
original one-to-one match branch is used, thus maintaining the end-to-end merit
and the same inference efficiency of DETR. The method is named
$\mathcal{H}$-DETR, and it shows that a wide range of representative DETR
methods can be consistently improved across a wide range of visual tasks,
including Deformable-DETR, 3DETR/PETRv2, PETR, and TransTrack, among others.
Code will be available at: https://github.com/HDETR
- Abstract(参考訳): 1対1のセットマッチングは、オブジェクト検出が重複検出を削除するために手作りのNMS(non-maximum suppress)メソッドを必要としないように、DETRのエンドツーエンド機能を確立するための鍵となる設計である。
このエンドツーエンドのシグネチャは、DETRの汎用性にとって重要であり、インスタンス/セマンティックセグメンテーション、ヒューマンポーズ推定、ポイントクラウド/マルチビューイメージベースの検出など、幅広い視覚問題に一般化されている。
しかし、正のサンプルに割り当てられたクエリが多すぎるため、1対1のマッチングは正のサンプルのトレーニング効率を大幅に低下させる。
本稿では、1対1のマッチングブランチと、トレーニング中に1対1のマッチング損失を使用する補助クエリを組み合わせたハイブリッドマッチングスキームに基づく、単純かつ効果的な手法を提案する。
このハイブリッド戦略はトレーニング効率を大幅に向上させ、精度を向上させることが示されている。
推論では、元の1対1マッチングブランチのみを使用し、DETRのエンドツーエンドのメリットと同一の推論効率を維持する。
この手法は$\mathcal{H}$-DETRと名付けられ、Deformable-DETR、3DETR/PETRv2、PETR、TransTrackなど、幅広い視覚的タスクで広範囲のDeTRメソッドを一貫して改善できることを示している。
コードはhttps://github.com/hdetr.com/。
関連論文リスト
- MS-DETR: Efficient DETR Training with Mixed Supervision [74.93329653526952]
MS-DETRは、推論に使用されるプライマリデコーダのオブジェクトクエリを1対1で監視する。
このアプローチではデコーダのブランチやオブジェクトクエリを追加する必要はありません。
実験結果から,本手法はDETRの変種よりも優れていることがわかった。
論文 参考訳(メタデータ) (2024-01-08T16:08:53Z) - Semi-DETR: Semi-Supervised Object Detection with Detection Transformers [105.45018934087076]
半教師付き物体検出(SSOD)におけるDETRに基づくフレームワークの解析
本報告では,第1次変圧器を用いたエンド・ツー・エンド半教師対象検出器であるSemi-DETRについて述べる。
我々の手法は、最先端の手法をクリアマージンで上回る。
論文 参考訳(メタデータ) (2023-07-16T16:32:14Z) - FeatAug-DETR: Enriching One-to-Many Matching for DETRs with Feature
Augmentation [48.94488166162821]
1対1のマッチングは、DETRのようなオブジェクト検出フレームワークにおいて重要な設計である。
画像や画像の特徴を拡大する異なる視点から一対一マッチングを実現する2つの手法を提案する。
提案手法の有効性を評価するため, 広範囲な実験を行った。
論文 参考訳(メタデータ) (2023-03-02T18:59:48Z) - Semantic-Aligned Matching for Enhanced DETR Convergence and Multi-Scale
Feature Fusion [95.7732308775325]
提案したDetection TRansformer (DETR) は、オブジェクト検出のための完全なエンドツーエンドパラダイムを確立している。
DETRは遅いトレーニング収束に悩まされており、様々な検出タスクの適用性を妨げている。
我々は,DETRの収束を加速し,検出性能を向上させるためにセマンティック・アラインド・マッチDreTR++を設計する。
論文 参考訳(メタデータ) (2022-07-28T15:34:29Z) - Group DETR: Fast DETR Training with Group-Wise One-to-Many Assignment [80.55064790937092]
複数の予測に1つの基幹オブジェクトを割り当てる1対多の割り当ては、より高速なR-CNNやFCOSのような検出方法に成功している。
グループDETR(Group DETR)は、単純だが効率的なDECRトレーニング手法であり、一対多の割り当てのためのグループワイドな方法を導入する。
実験により、グループDETRはトレーニング収束を著しく高速化し、様々なDETRモデルの性能を向上させることが示された。
論文 参考訳(メタデータ) (2022-07-26T17:57:58Z) - Accelerating DETR Convergence via Semantic-Aligned Matching [50.3633635846255]
本稿では,DTRの精度を犠牲にすることなく,DTRの収束を大幅に加速するセマンティック整合DTRであるSAM-DETRを提案する。
意味整合性マッチングにおいて最も識別性の高い特徴を持つ有能な点を明示的に検索し、収束をさらに高速化し、検出精度も向上する。
論文 参考訳(メタデータ) (2022-03-14T06:50:51Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。