論文の概要: Open World DETR: Transformer based Open World Object Detection
- arxiv url: http://arxiv.org/abs/2212.02969v1
- Date: Tue, 6 Dec 2022 13:39:30 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-07 17:09:36.042085
- Title: Open World DETR: Transformer based Open World Object Detection
- Title(参考訳): Open World DETR: Transformer を用いた Open World Object Detection
- Authors: Na Dong, Yongqiang Zhang, Mingli Ding, Gim Hee Lee
- Abstract要約: そこで我々は,Deformable DETRに基づくオープンワールドオブジェクト検出のための2段階学習手法Open World DETRを提案する。
モデルのクラス固有のコンポーネントを多視点の自己ラベル戦略と一貫性制約で微調整する。
提案手法は、他の最先端のオープンワールドオブジェクト検出方法よりも大きなマージンで優れている。
- 参考スコア(独自算出の注目度): 60.64535309016623
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Open world object detection aims at detecting objects that are absent in the
object classes of the training data as unknown objects without explicit
supervision. Furthermore, the exact classes of the unknown objects must be
identified without catastrophic forgetting of the previous known classes when
the corresponding annotations of unknown objects are given incrementally. In
this paper, we propose a two-stage training approach named Open World DETR for
open world object detection based on Deformable DETR. In the first stage, we
pre-train a model on the current annotated data to detect objects from the
current known classes, and concurrently train an additional binary classifier
to classify predictions into foreground or background classes. This helps the
model to build an unbiased feature representations that can facilitate the
detection of unknown classes in subsequent process. In the second stage, we
fine-tune the class-specific components of the model with a multi-view
self-labeling strategy and a consistency constraint. Furthermore, we alleviate
catastrophic forgetting when the annotations of the unknown classes becomes
available incrementally by using knowledge distillation and exemplar replay.
Experimental results on PASCAL VOC and MS-COCO show that our proposed method
outperforms other state-of-the-art open world object detection methods by a
large margin.
- Abstract(参考訳): open world object detectionは、トレーニングデータのオブジェクトクラスに存在しないオブジェクトを、明示的な監督なしに未知のオブジェクトとして検出することを目的としている。
さらに、未知のオブジェクトの正確なクラスは、対応する未知のオブジェクトのアノテーションが漸進的に与えられるとき、以前の既知のクラスを壊滅的に忘れずに識別しなければならない。
本稿では,Deformable DETRに基づくオープンワールドオブジェクト検出のための2段階学習手法Open World DETRを提案する。
最初の段階では、現在のアノテーション付きデータ上にモデルを事前トレーニングして、現在の既知のクラスからオブジェクトを検出するとともに、予測を前景クラスやバックグラウンドクラスに分類するための追加のバイナリ分類器を同時にトレーニングする。
これによりモデルは、後のプロセスで未知のクラスの検出を容易にする、バイアスのない特徴表現を構築するのに役立つ。
第2段階では、モデルのクラス固有のコンポーネントを多視点自己ラベル戦略と一貫性制約で微調整する。
さらに,知識蒸留や模範的な再生を用いて,未知のクラスのアノテーションが段階的に利用可能になると,破滅的な忘れを和らげる。
PASCAL VOCとMS-COCOの実験結果から,提案手法は,他の最先端のオープンワールドオブジェクト検出方法よりも大きなマージンで優れていた。
関連論文リスト
- Open-World Object Detection with Instance Representation Learning [1.8749305679160366]
本研究では,新しい物体を検知し,オープンワールド条件下で意味的にリッチな特徴を抽出できる物体検知器の訓練手法を提案する。
提案手法は頑健で一般化可能な特徴空間を学習し,他のOWODに基づく特徴抽出法よりも優れている。
論文 参考訳(メタデータ) (2024-09-24T13:13:34Z) - Unsupervised Recognition of Unknown Objects for Open-World Object
Detection [28.787586991713535]
Open-World Object Detection (OWOD) はオブジェクト検出問題を現実的でダイナミックなシナリオに拡張する。
現在のOWODモデル(OREやOW-DETRなど)は、高い客観性スコアを持つ擬似ラベル領域に注目する。
本稿では,未知の物体を認識するために,教師なしの識別モデルを学ぶ新しい手法を提案する。
論文 参考訳(メタデータ) (2023-08-31T08:17:29Z) - Weakly-supervised Contrastive Learning for Unsupervised Object Discovery [52.696041556640516]
ジェネリックな方法でオブジェクトを発見できるため、教師なしのオブジェクト発見は有望である。
画像から高レベルな意味的特徴を抽出する意味誘導型自己教師学習モデルを設計する。
オブジェクト領域のローカライズのための主成分分析(PCA)を導入する。
論文 参考訳(メタデータ) (2023-07-07T04:03:48Z) - Open-World Object Detection via Discriminative Class Prototype Learning [4.055884768256164]
オープンワールドオブジェクト検出(OWOD)は、オブジェクト検出とインクリメンタルラーニングとオープンセットラーニングを組み合わせた難しい問題である。
OCPL: 差別的OCPL: オープンワールドオブジェクト検出: 差別的OCPL: 差別的OCPL: オープンワールドオブジェクト検出: 差別的OCPL: 差別的OCPL: オープンワールドオブジェクト検出: 差別的OCPL: 差別的OCPL: オープンワールドオブジェクト検出: 差別的OCPL: 差別的OCPL: オープンワールドオブジェクト検出: オープンワールドオブジェクト検出
論文 参考訳(メタデータ) (2023-02-23T03:05:04Z) - Detecting the unknown in Object Detection [20.84221126313118]
我々は、アノテーションを必要とせずに未知のオブジェクトを予測できるUNKADと呼ばれる新しいトレーニング戦略を提案する。
UNKADはまず未知のオブジェクトを識別し、擬似ラベルを使用して未知のクラスをトレーニングする。
UNKADは未知の物体を直接検出できるが、従来の未知の検出技術と組み合わせることで、コストなしで性能を向上できることを示す。
論文 参考訳(メタデータ) (2022-08-24T16:27:38Z) - Towards Open-Set Object Detection and Discovery [38.81806249664884]
我々は新しいタスク、すなわちOpen-Set Object Detection and Discovery(OSODD)を提案する。
本稿では、まずオープンセットオブジェクト検出器を用いて、未知のオブジェクトと未知のオブジェクトの両方を予測する2段階の手法を提案する。
そこで,予測対象を教師なしで表現し,未知対象の集合から新たなカテゴリを発見する。
論文 参考訳(メタデータ) (2022-04-12T08:07:01Z) - Contrastive Object Detection Using Knowledge Graph Embeddings [72.17159795485915]
一つのホットアプローチで学習したクラス埋め込みの誤差統計と、自然言語処理や知識グラフから意味的に構造化された埋め込みを比較した。
本稿では,キーポイントベースおよびトランスフォーマーベースオブジェクト検出アーキテクチャの知識埋め込み設計を提案する。
論文 参考訳(メタデータ) (2021-12-21T17:10:21Z) - OW-DETR: Open-world Detection Transformer [90.56239673123804]
オープンワールドオブジェクト検出のための新しいエンドツーエンドトランスフォーマーベースのフレームワークOW-DETRを提案する。
OW-DETRは3つの専用コンポーネント、すなわち注目駆動の擬似ラベル、新規性分類、オブジェクトネススコアから構成される。
我々のモデルは、最近導入されたOWODアプローチであるOREよりも優れており、リコールの度合いは1.8%から3.3%である。
論文 参考訳(メタデータ) (2021-12-02T18:58:30Z) - Learning Open-World Object Proposals without Learning to Classify [110.30191531975804]
本研究では,各領域の位置と形状がどの接地トラストオブジェクトとどのように重なり合うかによって,各領域の目的性を純粋に推定する,分類不要なオブジェクトローカライゼーションネットワークを提案する。
この単純な戦略は一般化可能な対象性を学び、クロスカテゴリの一般化に関する既存の提案より優れている。
論文 参考訳(メタデータ) (2021-08-15T14:36:02Z) - Synthesizing the Unseen for Zero-shot Object Detection [72.38031440014463]
そこで本研究では,視覚領域における視覚的特徴と視覚的対象の両方を学習するために,視覚的特徴を合成することを提案する。
クラスセマンティックスを用いた新しい生成モデルを用いて特徴を生成するだけでなく,特徴を識別的に分離する。
論文 参考訳(メタデータ) (2020-10-19T12:36:11Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。