論文の概要: Instance-level Heterogeneous Domain Adaptation for Limited-labeled
Sketch-to-Photo Retrieval
- arxiv url: http://arxiv.org/abs/2211.14515v1
- Date: Sat, 26 Nov 2022 08:50:08 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-29 16:26:51.451336
- Title: Instance-level Heterogeneous Domain Adaptation for Limited-labeled
Sketch-to-Photo Retrieval
- Title(参考訳): 有限ラベルスケッチ・ツー・フォト検索のためのインスタンスレベルの不均一ドメイン適応
- Authors: Fan Yang, Yang Wu, Zheng Wang, Xiang Li, Sakriani Sakti, Satoshi
Nakamura
- Abstract要約: インスタンスレベルの不均一ドメイン適応(IHDA)フレームワークを提案する。
我々は,インスタンスレベルの知識を帰納的伝達方式で伝達することを目的とした,アイデンティティラベル学習のための微調整戦略を適用した。
提案手法は,3つのスケッチ・ツー・フォト画像検索ベンチマークに対して,アノテーションを伴わずに新たな手法を設定できることが実験により示されている。
- 参考スコア(独自算出の注目度): 36.32367182571164
- License: http://creativecommons.org/publicdomain/zero/1.0/
- Abstract: Although sketch-to-photo retrieval has a wide range of applications, it is
costly to obtain paired and rich-labeled ground truth. Differently, photo
retrieval data is easier to acquire. Therefore, previous works pre-train their
models on rich-labeled photo retrieval data (i.e., source domain) and then
fine-tune them on the limited-labeled sketch-to-photo retrieval data (i.e.,
target domain). However, without co-training source and target data, source
domain knowledge might be forgotten during the fine-tuning process, while
simply co-training them may cause negative transfer due to domain gaps.
Moreover, identity label spaces of source data and target data are generally
disjoint and therefore conventional category-level Domain Adaptation (DA) is
not directly applicable. To address these issues, we propose an Instance-level
Heterogeneous Domain Adaptation (IHDA) framework. We apply the fine-tuning
strategy for identity label learning, aiming to transfer the instance-level
knowledge in an inductive transfer manner. Meanwhile, labeled attributes from
the source data are selected to form a shared label space for source and target
domains. Guided by shared attributes, DA is utilized to bridge cross-dataset
domain gaps and heterogeneous domain gaps, which transfers instance-level
knowledge in a transductive transfer manner. Experiments show that our method
has set a new state of the art on three sketch-to-photo image retrieval
benchmarks without extra annotations, which opens the door to train more
effective models on limited-labeled heterogeneous image retrieval tasks.
Related codes are available at \url{https://github.com/fandulu/IHDA.
- Abstract(参考訳): スケッチから写真への検索は幅広い用途があるが、ペアとリッチラベルの真実を得るにはコストがかかる。
写真検索データの取得も容易である。
そのため、先行研究はリッチラベル付き写真検索データ(ソースドメイン)でモデルを事前訓練し、限定ラベル付きスケッチ・ツー・フォト検索データ(ターゲットドメイン)で微調整する。
しかし、ソースとターゲットデータの共同トレーニングがなければ、ソースドメインの知識は微調整のプロセス中に忘れられ、同時にトレーニングすることでドメイン間のギャップによって負の転送を引き起こす可能性がある。
さらに、ソースデータとターゲットデータのIDラベル空間は概して不一致であり、従来のカテゴリレベルドメイン適応(DA)は直接適用されない。
これらの問題に対処するために、インスタンスレベルの不均一ドメイン適応(IHDA)フレームワークを提案する。
インスタンスレベルの知識をインダクティブな転送方法で転送することを目的として,アイデンティティラベル学習に微調整戦略を適用する。
一方、ソースデータからラベル付き属性を選択して、ソースおよびターゲットドメインの共有ラベル空間を形成する。
共有属性によって導かれるdaは、トランスダクティブな転送方法でインスタンスレベルの知識を転送するクロスデータセットドメインギャップとヘテロジニアスドメインギャップを橋渡しするために利用される。
実験により,本手法は3つのスケッチ・ツー・フォト画像検索ベンチマークにおいて,追加のアノテーションを使わずに新たな技術を確立したことを示す。
関連するコードは \url{https://github.com/fandulu/ihda で入手できる。
関連論文リスト
- FPL+: Filtered Pseudo Label-based Unsupervised Cross-Modality Adaptation for 3D Medical Image Segmentation [14.925162565630185]
医用画像分割のための拡張フィルタ擬似ラベル (FPL+) を用いたUnsupervised Domain Adaptation (UDA) 手法を提案する。
まず、ソースドメイン内のラベル付き画像を、擬似ソースドメインセットと擬似ターゲットドメインセットからなる二重ドメイントレーニングセットに変換するために、クロスドメインデータ拡張を使用する。
次に、ラベル付きソースドメインイメージとターゲットドメインイメージを擬似ラベルと組み合わせて最終セグメンタを訓練し、不確実性推定に基づく画像レベルの重み付けとデュアルドメインのコンセンサスに基づく画素レベルの重み付けを提案し、ノイズのある擬似の悪影響を軽減する。
論文 参考訳(メタデータ) (2024-04-07T14:21:37Z) - Adapt Anything: Tailor Any Image Classifiers across Domains And
Categories Using Text-to-Image Diffusion Models [82.95591765009105]
我々は,現代テキスト・画像拡散モデルが,ドメインやカテゴリ間でタスク適応型画像分類器をカスタマイズできるかどうかを検討することを目的とする。
対象のテキストプロンプトから派生したカテゴリラベルを用いた画像合成には,1つのオフ・ザ・シェルフテキスト・ツー・イメージモデルのみを用いる。
論文 参考訳(メタデータ) (2023-10-25T11:58:14Z) - Source-Free Domain Adaptation for Medical Image Segmentation via
Prototype-Anchored Feature Alignment and Contrastive Learning [57.43322536718131]
医用画像セグメンテーションのための2段階のソースフリードメイン適応(SFDA)フレームワークを提案する。
プロトタイプアンコールされた特徴アライメントの段階では,まず,事前学習した画素ワイド分類器の重みを原プロトタイプとして利用する。
そこで,本研究では,目標となる特徴とクラスプロトタイプとの整合性を期待するコストを最小化し,双方向輸送を導入する。
論文 参考訳(メタデータ) (2023-07-19T06:07:12Z) - One-shot Unsupervised Domain Adaptation with Personalized Diffusion
Models [15.590759602379517]
ラベル付きソースドメインからターゲットドメインへのセグメンテーションモデルの適用は、ドメイン適応において最も難しい問題の1つである。
テキストと画像の拡散モデルを用いて、写真リアル画像を用いた合成ターゲットデータセットを生成する。
実験の結果,本手法は最先端OSUDA法を最大7.1%超えることがわかった。
論文 参考訳(メタデータ) (2023-03-31T14:16:38Z) - Disentangled Unsupervised Image Translation via Restricted Information
Flow [61.44666983942965]
多くの最先端のメソッドは、所望の共有vs固有の分割をアーキテクチャにハードコードする。
帰納的アーキテクチャバイアスに依存しない新しい手法を提案する。
提案手法は,2つの合成データセットと1つの自然なデータセットに対して一貫した高い操作精度を実現する。
論文 参考訳(メタデータ) (2021-11-26T00:27:54Z) - Cross-domain Contrastive Learning for Unsupervised Domain Adaptation [108.63914324182984]
教師なしドメイン適応(Unsupervised domain adapt、UDA)は、完全にラベル付けされたソースドメインから異なるラベル付けされていないターゲットドメインに学習した知識を転送することを目的としている。
対照的な自己教師型学習に基づいて、トレーニングとテストセット間のドメインの相違を低減するために、機能を整列させます。
論文 参考訳(メタデータ) (2021-06-10T06:32:30Z) - Consistency Regularization with High-dimensional Non-adversarial
Source-guided Perturbation for Unsupervised Domain Adaptation in Segmentation [15.428323201750144]
BiSIDAは、未ラベルのターゲットデータセットからの情報を効率的に活用するために、一貫性の正則化を採用している。
BiSIDAは、一般的に使われている2つの合成-実領域適応ベンチマーク上で、新しい最先端を実現する。
論文 参考訳(メタデータ) (2020-09-18T03:26:44Z) - Source Free Domain Adaptation with Image Translation [33.46614159616359]
大規模なデータセットをリリースする努力は、プライバシと知的財産権の考慮によって損なわれる可能性がある。
実現可能な代替手段は、代わりに事前訓練されたモデルをリリースすることである。
本稿では,対象画像のスタイルを未知のソース画像に変換する画像翻訳手法を提案する。
論文 参考訳(メタデータ) (2020-08-17T17:57:33Z) - TriGAN: Image-to-Image Translation for Multi-Source Domain Adaptation [82.52514546441247]
本稿では,ジェネレーティブ・アドバイサル・ネットワークに基づくマルチソース・ドメイン適応(MSDA)の最初のアプローチを提案する。
本手法は,画像の出現がドメイン,スタイル,内容の3つの要因に依存するという観察に着想を得たものである。
提案手法はMSDAベンチマークを用いて試行し,最先端の手法より優れていることを示す。
論文 参考訳(メタデータ) (2020-04-19T05:07:22Z) - Cross-domain Self-supervised Learning for Domain Adaptation with Few
Source Labels [78.95901454696158]
ドメイン適応のためのクロスドメイン自己教師型学習手法を提案する。
本手法は,ソースラベルが少ない新しいターゲット領域において,ターゲット精度を著しく向上させる。
論文 参考訳(メタデータ) (2020-03-18T15:11:07Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。