論文の概要: How does the degree of novelty impacts semi-supervised representation
learning for novel class retrieval?
- arxiv url: http://arxiv.org/abs/2208.08217v1
- Date: Wed, 17 Aug 2022 10:49:10 GMT
- ステータス: 処理完了
- システム内更新日: 2022-08-18 12:14:51.338876
- Title: How does the degree of novelty impacts semi-supervised representation
learning for novel class retrieval?
- Title(参考訳): ノベルティの程度は、新しいクラス検索のための半教師付き表現学習にどのように影響するか?
- Authors: Quentin Leroy, Olivier Buisson, Alexis Joly
- Abstract要約: ディープネットワークによる教師付き表現学習は、トレーニングクラスに過度に適合する傾向がある。
本稿では,新しい授業の新規性の度合いを変化させる独自の評価手法を提案する。
セマンティクスのギャップが大きくなると,バニラの教師付き表現はより新しいクラスを検索するのに不足することがわかった。
- 参考スコア(独自算出の注目度): 0.5672132510411463
- License: http://creativecommons.org/licenses/by-sa/4.0/
- Abstract: Supervised representation learning with deep networks tends to overfit the
training classes and the generalization to novel classes is a challenging
question. It is common to evaluate a learned embedding on held-out images of
the same training classes. In real applications however, data comes from new
sources and novel classes are likely to arise. We hypothesize that
incorporating unlabelled images of novel classes in the training set in a
semi-supervised fashion would be beneficial for the efficient retrieval of
novel-class images compared to a vanilla supervised representation. To verify
this hypothesis in a comprehensive way, we propose an original evaluation
methodology that varies the degree of novelty of novel classes by partitioning
the dataset category-wise either randomly, or semantically, i.e. by minimizing
the shared semantics between base and novel classes. This evaluation procedure
allows to train a representation blindly to any novel-class labels and evaluate
the frozen representation on the retrieval of base or novel classes. We find
that a vanilla supervised representation falls short on the retrieval of novel
classes even more so when the semantics gap is higher. Semi-supervised
algorithms allow to partially bridge this performance gap but there is still
much room for improvement.
- Abstract(参考訳): ディープネットワークを用いた教師付き表現学習は、トレーニングクラスに過度に適合する傾向にあり、新しいクラスへの一般化は難しい問題である。
同じトレーニングクラスのホールドアウトイメージに学習した埋め込みを評価することが一般的である。
しかし、実際のアプリケーションでは、新しいソースからデータが得られ、新しいクラスが生まれる可能性が高い。
半教師付きでトレーニングセットに新しいクラスのラベルなし画像を組み込むことは,バニラ教師付き表現と比較して,新しいクラス画像の効率的な検索に有益であると仮定した。
この仮説を包括的に検証するために,データセットをランダムに,あるいは意味的に分類し,基本クラスと新規クラス間の共有意味論を最小化することにより,新規クラスの新規性を変化させる独自の評価手法を提案する。
この評価手順により、新しいクラスラベルに盲目的に表現を訓練し、ベースクラスまたは新規クラスの検索における凍結表現を評価することができる。
セマンティクスのギャップが大きくなると,バニラの教師付き表現はより新しいクラスを検索するのに不足することがわかった。
半教師付きアルゴリズムは、このパフォーマンスギャップを部分的にブリッジできるが、改善の余地は多い。
関連論文リスト
- Semantic Enhanced Few-shot Object Detection [37.715912401900745]
本稿では, セマンティックな埋め込みを利用してより優れた検出を行う, 微調整に基づくFSODフレームワークを提案する。
提案手法は,各新規クラスが類似の基底クラスと混同されることなく,コンパクトな特徴空間を構築することを可能にする。
論文 参考訳(メタデータ) (2024-06-19T12:40:55Z) - Dual-View Data Hallucination with Semantic Relation Guidance for
Few-Shot Image Recognition [52.19737194653999]
本稿では、意味的関係を利用して、画像認識のための二重視点データ幻覚を導出するフレームワークを提案する。
インスタンスビューデータ幻覚モジュールは、新規クラスの各サンプルを幻覚して新しいデータを生成する。
プロトタイプビューデータ幻覚モジュールは、意味認識尺度を利用して、新しいクラスのプロトタイプを推定する。
論文 参考訳(メタデータ) (2024-01-13T12:32:29Z) - ProxyDet: Synthesizing Proxy Novel Classes via Classwise Mixup for
Open-Vocabulary Object Detection [7.122652901894367]
Open-vocabulary Object Detection (OVOD)は、トレーニングセットにカテゴリが含まれていない新しいオブジェクトを認識することを目的としている。
本稿では,新しいクラス全体の分布を一般化する手法を提案する。
論文 参考訳(メタデータ) (2023-12-12T13:45:56Z) - PromptCAL: Contrastive Affinity Learning via Auxiliary Prompts for
Generalized Novel Category Discovery [39.03732147384566]
Generalized Novel Category Discovery (GNCD) 設定は、既知のクラスや新しいクラスから来るラベルなしのトレーニングデータを分類することを目的としている。
本稿では,この課題に対処するために,PromptCALと呼ばれる補助視覚プロンプトを用いたコントラスト親和性学習法を提案する。
提案手法は,クラストークンと視覚的プロンプトのための既知のクラスと新しいクラスのセマンティッククラスタリングを改善するために,信頼性の高いペアワイズサンプル親和性を発見する。
論文 参考訳(メタデータ) (2022-12-11T20:06:14Z) - Activating the Discriminability of Novel Classes for Few-shot
Segmentation [48.542627940781095]
本稿では,特徴符号化段階とセグメンテーションの予測段階の両方において,新規クラスの識別可能性を明示的に活性化することを提案する。
セグメンテーションの予測段階では、クエリ画像の高信頼画素を用いて自分自身を洗練できる自己修正オンラインフォアグラウンド分類器(SROFB)を学習する。
論文 参考訳(メタデータ) (2022-12-02T12:22:36Z) - Bridging Non Co-occurrence with Unlabeled In-the-wild Data for
Incremental Object Detection [56.22467011292147]
物体検出における破滅的忘れを緩和するために,いくつかの漸進的学習法が提案されている。
有効性にもかかわらず、これらの手法は新規クラスのトレーニングデータにラベルのないベースクラスの共起を必要とする。
そこで本研究では,新たな授業の訓練において,欠落した基本クラスが原因で生じる非発生を補うために,未ラベルのインザ・ザ・ワイルドデータを使用することを提案する。
論文 参考訳(メタデータ) (2021-10-28T10:57:25Z) - Revisiting Deep Local Descriptor for Improved Few-Shot Classification [56.74552164206737]
textbfDense textbfClassification と textbfAttentive textbfPooling を利用して埋め込みの質を向上させる方法を示す。
広範に使われているグローバル平均プール (GAP) の代わりに, 注意深いプールを施し, 特徴マップをプールすることを提案する。
論文 参考訳(メタデータ) (2021-03-30T00:48:28Z) - Learning and Evaluating Representations for Deep One-class
Classification [59.095144932794646]
ディープワンクラス分類のための2段階フレームワークを提案する。
まず,一級データから自己教師付き表現を学習し,学習した表現に基づいて一級分類器を構築する。
実験では、視覚領域の1クラス分類ベンチマークで最先端の性能を示す。
論文 参考訳(メタデータ) (2020-11-04T23:33:41Z) - Generalized Few-Shot Video Classification with Video Retrieval and
Feature Generation [132.82884193921535]
従来の手法は,映像特徴学習の重要性を過小評価し,二段階的アプローチを提案する。
この単純なベースラインアプローチは、既存のベンチマークで20ポイント以上の精度で、以前の数ショットビデオ分類方法よりも優れていることを示す。
さらなる改善をもたらす2つの新しいアプローチを提案する。
論文 参考訳(メタデータ) (2020-07-09T13:05:32Z) - Sharing Matters for Generalization in Deep Metric Learning [22.243744691711452]
本研究は,アノテーションやデータトレーニングを必要とせずに,クラスを分離した特徴を学習する方法を検討する。
我々のアプローチを新しいトリプルトサンプリング戦略として定式化することにより、最近のランキング損失フレームワークに容易に適用できる。
論文 参考訳(メタデータ) (2020-04-12T10:21:15Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。