論文の概要: Reinforced Attention for Few-Shot Learning and Beyond
- arxiv url: http://arxiv.org/abs/2104.04192v1
- Date: Fri, 9 Apr 2021 05:01:15 GMT
- ステータス: 処理完了
- システム内更新日: 2021-04-12 14:05:07.062649
- Title: Reinforced Attention for Few-Shot Learning and Beyond
- Title(参考訳): ファウショット学習とそれ以上の強化注意
- Authors: Jie Hong, Pengfei Fang, Weihao Li, Tong Zhang, Christian Simon,
Mehrtash Harandi and Lars Petersson
- Abstract要約: 少数ショット学習は、限られた数のサポートサンプルを与えられた未公開クラスからのクエリサンプルを正しく認識することを目的としている。
我々は、強化学習によって訓練された注目エージェントをバックボーンネットワークに装備する。
実験により、埋め込みネットワークは、より識別的な表現を段階的に生成できることを示した。
- 参考スコア(独自算出の注目度): 37.840203408724996
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Few-shot learning aims to correctly recognize query samples from unseen
classes given a limited number of support samples, often by relying on global
embeddings of images. In this paper, we propose to equip the backbone network
with an attention agent, which is trained by reinforcement learning. The policy
gradient algorithm is employed to train the agent towards adaptively localizing
the representative regions on feature maps over time. We further design a
reward function based on the prediction of the held-out data, thus helping the
attention mechanism to generalize better across the unseen classes. The
extensive experiments show, with the help of the reinforced attention, that our
embedding network has the capability to progressively generate a more
discriminative representation in few-shot learning. Moreover, experiments on
the task of image classification also show the effectiveness of the proposed
design.
- Abstract(参考訳): 少ないショットラーニングは、サポートサンプルの数が限られているため、不明なクラスからのクエリサンプルを正しく認識することを目的としている。
本稿では,強化学習によって訓練された注目エージェントをバックボーンネットワークに装備することを提案する。
ポリシー勾配アルゴリズムは、時間とともに特徴地図上の代表領域を適応的にローカライズするためにエージェントを訓練する。
さらに,保留データの予測に基づいて報奨関数を設計すれば,注意機構が未知のクラスをまたいでより汎用化することができる。
大規模な実験は、強化された注意の助けを借りて、我々の埋め込みネットワークは、数ショットの学習において、より差別的な表現を徐々に生成する能力を持っていることを示している。
また,画像分類の課題に対する実験により,提案手法の有効性が示された。
関連論文リスト
- Granularity Matters in Long-Tail Learning [62.30734737735273]
より粒度の細かいデータセットは、データの不均衡の影響を受けにくい傾向があります。
既存のクラスと視覚的に類似したオープンセット補助クラスを導入し、頭と尾の両方の表現学習を強化することを目的とした。
補助授業の圧倒的な存在がトレーニングを混乱させるのを防ぐために,近隣のサイレンシング障害を導入する。
論文 参考訳(メタデータ) (2024-10-21T13:06:21Z) - From Patches to Objects: Exploiting Spatial Reasoning for Better Visual
Representations [2.363388546004777]
本研究では,空間的推論に基づく新しい予備的事前学習手法を提案する。
本提案手法は,識別的自己管理手法の補助的タスクとして空間推論を導入することで,より柔軟なコントラスト学習の定式化を実現する。
論文 参考訳(メタデータ) (2023-05-21T07:46:46Z) - Localized Region Contrast for Enhancing Self-Supervised Learning in
Medical Image Segmentation [27.82940072548603]
本稿では,地域コントラスト(LRC)を統合した新しいコントラスト学習フレームワークを提案する。
提案手法では,Felzenszwalbのアルゴリズムによるスーパーピクセルの同定と,新しいコントラッシブサンプリング損失を用いた局所コントラスト学習を行う。
論文 参考訳(メタデータ) (2023-04-06T22:43:13Z) - An Empirical Investigation of Representation Learning for Imitation [76.48784376425911]
視覚、強化学習、NLPにおける最近の研究は、補助的な表現学習の目的が、高価なタスク固有の大量のデータの必要性を減らすことを示している。
本稿では,表現学習アルゴリズムを構築するためのモジュラーフレームワークを提案する。
論文 参考訳(メタデータ) (2022-05-16T11:23:42Z) - LEAD: Self-Supervised Landmark Estimation by Aligning Distributions of
Feature Similarity [49.84167231111667]
自己監督型ランドマーク検出における既存の研究は、画像から高密度(ピクセルレベルの)特徴表現を学習することに基づいている。
自己教師付き方式で高密度同変表現の学習を強化するアプローチを提案する。
機能抽出器にそのような先行性があることは,アノテーションの数が大幅に制限されている場合でも,ランドマーク検出に役立ちます。
論文 参考訳(メタデータ) (2022-04-06T17:48:18Z) - Explaining, Evaluating and Enhancing Neural Networks' Learned
Representations [2.1485350418225244]
より効率的で効率的な表現への障害ではなく、いかに説明可能性が助けになるかを示す。
我々は,2つの新しいスコアを定義して,潜伏埋め込みの難易度と難易度を評価する。
表現学習課題の訓練において,提案したスコアを制約として採用することで,モデルの下流性能が向上することを示す。
論文 参考訳(メタデータ) (2022-02-18T19:00:01Z) - Region Comparison Network for Interpretable Few-shot Image
Classification [97.97902360117368]
新しいクラスのモデルをトレーニングするために、ラベル付きサンプルの限られた数だけを効果的に活用するための画像分類が提案されている。
本研究では,領域比較ネットワーク (RCN) と呼ばれる距離学習に基づく手法を提案する。
また,タスクのレベルからカテゴリへの解釈可能性の一般化も提案する。
論文 参考訳(メタデータ) (2020-09-08T07:29:05Z) - Deep Reinforced Attention Learning for Quality-Aware Visual Recognition [73.15276998621582]
我々は,任意の畳み込みニューラルネットワークにおける中間注意マップの弱教師付き生成機構を構築した。
メタ批評家ネットワークを導入し、メインネットワークにおける注目マップの質を評価する。
論文 参考訳(メタデータ) (2020-07-13T02:44:38Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。