論文の概要: Automatically Discovering Novel Visual Categories with Self-supervised
Prototype Learning
- arxiv url: http://arxiv.org/abs/2208.00979v1
- Date: Mon, 1 Aug 2022 16:34:33 GMT
- ステータス: 処理完了
- システム内更新日: 2022-08-02 14:11:08.129672
- Title: Automatically Discovering Novel Visual Categories with Self-supervised
Prototype Learning
- Title(参考訳): 自己教師付きプロトタイプ学習による新しい視覚カテゴリの自動発見
- Authors: Lu Zhang, Lu Qi, Xu Yang, Hong Qiao, Ming-Hsuan Yang, Zhiyong Liu
- Abstract要約: 本稿では,大規模な画像収集において未知のカテゴリを識別することを目的とした,新しいカテゴリ発見(NCD)の課題に取り組む。
本稿では,プロトタイプ表現学習とプロトタイプ自己学習という,2つの主要な段階からなる適応型プロトタイプ学習手法を提案する。
本研究では,4つのベンチマークデータセットについて広範な実験を行い,提案手法の有効性とロバスト性を示す。
- 参考スコア(独自算出の注目度): 68.63910949916209
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: This paper tackles the problem of novel category discovery (NCD), which aims
to discriminate unknown categories in large-scale image collections. The NCD
task is challenging due to the closeness to the real-world scenarios, where we
have only encountered some partial classes and images. Unlike other works on
the NCD, we leverage the prototypes to emphasize the importance of category
discrimination and alleviate the issue of missing annotations of novel classes.
Concretely, we propose a novel adaptive prototype learning method consisting of
two main stages: prototypical representation learning and prototypical
self-training. In the first stage, we obtain a robust feature extractor, which
could serve for all images with base and novel categories. This ability of
instance and category discrimination of the feature extractor is boosted by
self-supervised learning and adaptive prototypes. In the second stage, we
utilize the prototypes again to rectify offline pseudo labels and train a final
parametric classifier for category clustering. We conduct extensive experiments
on four benchmark datasets and demonstrate the effectiveness and robustness of
the proposed method with state-of-the-art performance.
- Abstract(参考訳): 本稿では,大規模な画像収集において未知のカテゴリを識別することを目的とした,新しいカテゴリ発見(NCD)の問題に取り組む。
NCDタスクは、いくつかの部分的なクラスやイメージに遭遇しただけで、現実のシナリオに近いため、難しい。
ncdの他の作品とは異なり、我々はプロトタイプを利用してカテゴリ識別の重要性を強調し、新しいクラスのアノテーションの欠如の問題を軽減する。
具体的には、原型表現学習と原型自己学習という2つの主要な段階からなる適応型プロトタイプ学習手法を提案する。
第1段階では,基本カテゴリと新しいカテゴリを持つすべての画像に対して有効なロバストな特徴抽出器を得る。
自己教師付き学習と適応型プロトタイプによって特徴抽出器の例とカテゴリー識別能力が向上する。
第2段階では、プロトタイプを用いてオフラインの擬似ラベルを修正し、カテゴリクラスタリングのための最終的なパラメトリック分類器を訓練する。
4つのベンチマークデータセットについて広範な実験を行い,提案手法の有効性とロバスト性を示す。
関連論文リスト
- Activating the Discriminability of Novel Classes for Few-shot
Segmentation [48.542627940781095]
本稿では,特徴符号化段階とセグメンテーションの予測段階の両方において,新規クラスの識別可能性を明示的に活性化することを提案する。
セグメンテーションの予測段階では、クエリ画像の高信頼画素を用いて自分自身を洗練できる自己修正オンラインフォアグラウンド分類器(SROFB)を学習する。
論文 参考訳(メタデータ) (2022-12-02T12:22:36Z) - Novel Class Discovery without Forgetting [72.52222295216062]
我々は NCDwF: Novel Class Discovery without Forgetting の新たな実用的問題設定を特定し,定式化する。
ラベルのないデータから新しいカテゴリのインスタンスを段階的に発見する機械学習モデルを提案する。
CIFAR-10, CIFAR-100, ImageNet-1000に基づく実験プロトコルを導入し, 知識保持と新しいクラス発見のトレードオフを測定する。
論文 参考訳(メタデータ) (2022-07-21T17:54:36Z) - Class-incremental Novel Class Discovery [76.35226130521758]
クラス増進型新規クラス発見(class-iNCD)の課題について検討する。
基本クラスに関する過去の情報を忘れないようにする,クラスiNCDのための新しい手法を提案する。
3つの共通ベンチマークで実施した実験により,本手法が最先端の手法を著しく上回ることを示した。
論文 参考訳(メタデータ) (2022-07-18T13:49:27Z) - Dual Prototypical Contrastive Learning for Few-shot Semantic
Segmentation [55.339405417090084]
本稿では,FSSタスクに適合する2つの特徴的コントラスト学習手法を提案する。
第一の考え方は、プロトタイプの特徴空間におけるクラス内距離を減少させながら、クラス間距離を増やすことで、プロトタイプをより差別的にすることである。
提案手法は,PASCAL-5iおよびCOCO-20iデータセット上で,最先端のFSS手法よりも優れていることを示す。
論文 参考訳(メタデータ) (2021-11-09T08:14:50Z) - Multi-Label Few-Shot Learning for Aspect Category Detection [23.92900196246631]
感情分析におけるアスペクトカテゴリー検出(ACD)は、文中のアスペクトカテゴリを特定することを目的としている。
既存の数発の学習アプローチは、主にシングルラベルの予測に焦点を当てている。
本稿では,プロトタイプネットワークに基づく複数ラベルの複数ショット学習手法を提案する。
論文 参考訳(メタデータ) (2021-05-29T01:56:11Z) - Semi-Supervised Few-Shot Classification with Deep Invertible Hybrid
Models [4.189643331553922]
半教師付き小ショット分類のための潜在空間レベルで識別学習と生成学習を統合するディープ・インバーチブルハイブリッドモデルを提案する。
我々の主な独創性は、これらのコンポーネントを潜在空間レベルで統合することであり、過度な適合を防ぐのに有効である。
論文 参考訳(メタデータ) (2021-05-22T05:55:16Z) - Contrastive Prototype Learning with Augmented Embeddings for Few-Shot
Learning [58.2091760793799]
拡張埋め込み(CPLAE)モデルを用いた新しいコントラスト型プロトタイプ学習を提案する。
クラスプロトタイプをアンカーとして、CPLは、同じクラスのクエリサンプルを、異なるクラスのサンプルを、さらに遠くに引き出すことを目的としている。
いくつかのベンチマークによる大規模な実験により,提案したCPLAEが新たな最先端を実現することが示された。
論文 参考訳(メタデータ) (2021-01-23T13:22:44Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。