論文の概要: Self-Taught Metric Learning without Labels
- arxiv url: http://arxiv.org/abs/2205.01903v1
- Date: Wed, 4 May 2022 05:48:40 GMT
- ステータス: 処理完了
- システム内更新日: 2022-05-06 00:04:48.037946
- Title: Self-Taught Metric Learning without Labels
- Title(参考訳): ラベルのない自己学習メトリック学習
- Authors: Sungyeon Kim, Dongwon Kim, Minsu Cho and Suha Kwak
- Abstract要約: 教師なしメトリック学習のための新しい自己学習フレームワークを提案する。
埋め込みモデルの移動平均を通してデータ間のクラス等価関係を予測し、予測された関係を擬似ラベルとして学習する。
- 参考スコア(独自算出の注目度): 47.832107446521626
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: We present a novel self-taught framework for unsupervised metric learning,
which alternates between predicting class-equivalence relations between data
through a moving average of an embedding model and learning the model with the
predicted relations as pseudo labels. At the heart of our framework lies an
algorithm that investigates contexts of data on the embedding space to predict
their class-equivalence relations as pseudo labels. The algorithm enables
efficient end-to-end training since it demands no off-the-shelf module for
pseudo labeling. Also, the class-equivalence relations provide rich supervisory
signals for learning an embedding space. On standard benchmarks for metric
learning, it clearly outperforms existing unsupervised learning methods and
sometimes even beats supervised learning models using the same backbone
network. It is also applied to semi-supervised metric learning as a way of
exploiting additional unlabeled data, and achieves the state of the art by
boosting performance of supervised learning substantially.
- Abstract(参考訳): 本稿では,組込みモデルの移動平均によるデータ間のクラス等価関係の予測と,予測された関係を擬似ラベルとしてモデル学習を交互に行う,教師なしメトリック学習のための新しい自己学習フレームワークを提案する。
我々のフレームワークの中心には、埋め込み空間上のデータのコンテキストを調査し、それらのクラス同値関係を擬似ラベルとして予測するアルゴリズムがあります。
このアルゴリズムは、擬似ラベリングのためのオフザシェルフモジュールを必要としないため、効率的なエンドツーエンドトレーニングを可能にする。
また、クラス同値関係は埋め込み空間を学習するための豊富な監督信号を提供する。
メトリクス学習の標準的なベンチマークでは、既存の教師なし学習方法よりも明らかに優れており、時には同じバックボーンネットワークを使用して教師付き学習モデルを上回ることもある。
また、付加的なラベル付きデータを利用する方法として、半教師付きメトリックラーニングにも適用し、教師付き学習の性能を実質的に向上させることで、その技術状態を達成する。
関連論文リスト
- Hierarchical Insights: Exploiting Structural Similarities for Reliable 3D Semantic Segmentation [4.480310276450028]
本稿では,抽象を通してクラス間の構造的関係を学習する3次元LiDARセマンティックセマンティックセマンティクスモデルのトレーニング戦略を提案する。
これは、階層的マルチラベル分類(HMC)のための学習規則を用いて、これらの関係を暗黙的にモデル化することで達成される。
詳細な分析により、このトレーニング戦略はモデルの信頼性校正を改善するだけでなく、融合、予測、計画といった下流タスクに有用な追加情報を保持することが示される。
論文 参考訳(メタデータ) (2024-04-09T08:49:01Z) - Automated Labeling of German Chest X-Ray Radiology Reports using Deep
Learning [50.591267188664666]
本稿では,ルールベースのドイツ語CheXpertモデルによってラベル付けされたレポートに基づいて,ディープラーニングに基づくCheXpertラベル予測モデルを提案する。
その結果,3つのタスクすべてにおいて,ルールベースモデルを大幅に上回ったアプローチの有効性が示された。
論文 参考訳(メタデータ) (2023-06-09T16:08:35Z) - Semi-Supervised Learning of Semantic Correspondence with Pseudo-Labels [26.542718087103665]
SemiMatchは意味論的に類似した画像間の密接な対応を確立するための半教師付きソリューションである。
筆者らのフレームワークは,ソースと弱増強ターゲット間のモデル予測自体を用いて擬似ラベルを生成し,擬似ラベルを用いてソースと強増強ターゲット間のモデルの再学習を行う。
実験では、SemiMatchは様々なベンチマーク、特にPF-Willowにおける最先端のパフォーマンスを大きなマージンで達成している。
論文 参考訳(メタデータ) (2022-03-30T03:52:50Z) - Deep Relational Metric Learning [84.95793654872399]
本稿では,画像クラスタリングと検索のためのディープリレーショナルメトリック学習フレームワークを提案する。
我々は、クラス間分布とクラス内分布の両方をモデル化するために、異なる側面から画像を特徴付ける特徴のアンサンブルを学ぶ。
広く使われているCUB-200-2011、Cars196、Stanford Online Productsデータセットの実験は、我々のフレームワークが既存の深層学習方法を改善し、非常に競争力のある結果をもたらすことを示した。
論文 参考訳(メタデータ) (2021-08-23T09:31:18Z) - Co-learning: Learning from Noisy Labels with Self-supervision [28.266156561454327]
自己教師付き学習はラベルのない状態で機能し、ノイズラベルの負の影響を排除します。
教師付き学習と自己監督型学習の両方の視点で協調学習を行うことで、ノイズラベルを用いた学習のためのコラーニングという、シンプルで効果的な方法を提案する。
論文 参考訳(メタデータ) (2021-08-05T06:20:51Z) - ORDisCo: Effective and Efficient Usage of Incremental Unlabeled Data for
Semi-supervised Continual Learning [52.831894583501395]
連続学習は、入力されたデータが完全にラベル付けされていると仮定し、実際のアプリケーションでは適用できないかもしれない。
我々は、条件付き生成逆数ネットワーク(GAN)を用いた分類器を相互に学習するために、識別器整合(ORDisCo)を用いたディープオンライン再生を提案する。
ORDisCo が SSCL の様々な半教師付き学習ベンチマークデータセットで大幅なパフォーマンス向上を達成していることを示します。
論文 参考訳(メタデータ) (2021-01-02T09:04:14Z) - SLADE: A Self-Training Framework For Distance Metric Learning [75.54078592084217]
我々は、追加のラベルのないデータを活用することで、検索性能を向上させるための自己学習フレームワークSLADEを提案する。
まず、ラベル付きデータに基づいて教師モデルをトレーニングし、ラベルなしデータに対して擬似ラベルを生成する。
次に、最終機能埋め込みを生成するために、ラベルと擬似ラベルの両方で学生モデルをトレーニングします。
論文 参考訳(メタデータ) (2020-11-20T08:26:10Z) - Adversarial Self-Supervised Contrastive Learning [62.17538130778111]
既存の対数学習アプローチは、主にクラスラベルを使用して、誤った予測につながる対数サンプルを生成する。
本稿では,未ラベルデータに対する新たな逆攻撃を提案する。これにより,モデルが摂動データサンプルのインスタンスレベルのアイデンティティを混乱させる。
ラベル付きデータなしで頑健なニューラルネットワークを逆さまにトレーニングするための,自己教師付きコントラスト学習フレームワークを提案する。
論文 参考訳(メタデータ) (2020-06-13T08:24:33Z) - Self-Supervised Relational Reasoning for Representation Learning [5.076419064097733]
自己教師型学習では、ラベルのないデータに対して代替ターゲットを定義することにより、代理目的を達成することを課題とする。
本稿では,学習者が無ラベルデータに暗黙的な情報から信号をブートストラップできる,新たな自己教師型関係推論法を提案する。
提案手法は,標準データセット,プロトコル,バックボーンを用いて,厳密な実験手順に従って評価する。
論文 参考訳(メタデータ) (2020-06-10T14:24:25Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。