論文の概要: Unaligned Image-to-Image Translation by Learning to Reweight
- arxiv url: http://arxiv.org/abs/2109.11736v1
- Date: Fri, 24 Sep 2021 04:08:22 GMT
- ステータス: 処理完了
- システム内更新日: 2021-09-28 01:23:40.194041
- Title: Unaligned Image-to-Image Translation by Learning to Reweight
- Title(参考訳): リウェイト学習による画像間非整合変換
- Authors: Shaoan Xie, Mingming Gong, Yanwu Xu, and Kun Zhang
- Abstract要約: 教師なし画像から画像への変換は、トレーニングにペア画像を用いることなく、ソースからターゲットドメインへのマッピングを学習することを目的としている。
教師なしのイメージ翻訳に不可欠な仮定は、2つの領域が整列しているということである。
重要度再重み付けに基づく画像の選択を提案し,重み付けを学習し,同時に自動翻訳を行う手法を開発した。
- 参考スコア(独自算出の注目度): 40.93678165567824
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Unsupervised image-to-image translation aims at learning the mapping from the
source to target domain without using paired images for training. An essential
yet restrictive assumption for unsupervised image translation is that the two
domains are aligned, e.g., for the selfie2anime task, the anime (selfie) domain
must contain only anime (selfie) face images that can be translated to some
images in the other domain. Collecting aligned domains can be laborious and
needs lots of attention. In this paper, we consider the task of image
translation between two unaligned domains, which may arise for various possible
reasons. To solve this problem, we propose to select images based on importance
reweighting and develop a method to learn the weights and perform translation
simultaneously and automatically. We compare the proposed method with
state-of-the-art image translation approaches and present qualitative and
quantitative results on different tasks with unaligned domains. Extensive
empirical evidence demonstrates the usefulness of the proposed problem
formulation and the superiority of our method.
- Abstract(参考訳): 教師なし画像から画像への変換は、トレーニングにペア画像を用いることなく、ソースからターゲットドメインへのマッピングを学習することを目的としている。
教師なし画像翻訳に不可欠な仮定は、2つのドメインが整列していることである。例えば、selfie2animeタスクでは、アニメ(selfie)ドメインは、他のドメインのいくつかの画像に変換できるアニメ(selfie)顔画像のみを含む必要がある。
整列したドメインの収集は手間がかかり、多くの注意が要る。
本稿では,2つの非整合領域間の画像翻訳の課題について考察する。
そこで本研究では,重み付けに基づく画像選択手法を提案し,重み付けを学習し,同時に自動翻訳を行う手法を開発した。
提案手法と最先端画像翻訳手法を比較し,非整合領域の異なるタスクに対する質的,定量的な結果を示す。
広範な実証的証拠は,提案する問題定式化の有用性と提案手法の優越性を示している。
関連論文リスト
- ACE: Zero-Shot Image to Image Translation via Pretrained
Auto-Contrastive-Encoder [2.1874189959020427]
本研究では,同じデータ分布内のサンプルの類似点と相違点を学習し,画像の特徴を抽出する手法を提案する。
ACEの設計により、画像翻訳タスクのトレーニングを初めて行うことなく、ゼロショット画像から画像への変換を実現することができる。
本モデルは,ゼロショット学習を用いたマルチモーダル画像翻訳タスクにおける競合的な結果も達成する。
論文 参考訳(メタデータ) (2023-02-22T23:52:23Z) - Multi-domain Unsupervised Image-to-Image Translation with Appearance
Adaptive Convolution [62.4972011636884]
本稿では,MDUIT(Multi-domain unsupervised image-to-image translation)フレームワークを提案する。
我々は、分解されたコンテンツ特徴と外観適応的畳み込みを利用して、画像をターゲットの外観に変換する。
提案手法は,最先端の手法と比較して,複数の領域で視覚的に多様かつ妥当な結果が得られることを示す。
論文 参考訳(メタデータ) (2022-02-06T14:12:34Z) - Unsupervised Image-to-Image Translation via Pre-trained StyleGAN2
Network [73.5062435623908]
本稿では,一連のモデル変換によって対象領域に新たなモデルを生成する新しいI2I翻訳手法を提案する。
潜在ベクトルを生成されたモデルに入力することで、ソースドメインとターゲットドメインの間でI2I翻訳を行うことができる。
論文 参考訳(メタデータ) (2020-10-12T13:51:40Z) - BalaGAN: Image Translation Between Imbalanced Domains via Cross-Modal
Transfer [53.79505340315916]
ドメイン不均衡問題に対処するために特別に設計されたBalaGANを紹介する。
我々は、画像から画像への変換問題を、バランスよく、複数クラス、条件付き翻訳問題に変換するために、よりリッチなドメインの潜在モダリティを利用する。
本研究では,BalaGANが,無条件およびスタイル変換に基づく画像から画像への変換方式の強いベースラインよりも優れていることを示す。
論文 参考訳(メタデータ) (2020-10-05T14:16:41Z) - Crossing-Domain Generative Adversarial Networks for Unsupervised
Multi-Domain Image-to-Image Translation [12.692904507625036]
複数の領域にまたがる教師なし画像間翻訳のための一般的なフレームワークを提案する。
提案するフレームワークは,一対のエンコーダと一対のGANから構成される。
論文 参考訳(メタデータ) (2020-08-27T01:54:07Z) - Retrieval Guided Unsupervised Multi-domain Image-to-Image Translation [59.73535607392732]
画像から画像への変換は、ある視覚領域から別の領域へ画像を変換するマッピングを学ぶことを目的としている。
本稿では,画像から画像への変換作業を支援するための画像検索システムを提案する。
論文 参考訳(メタデータ) (2020-08-11T20:11:53Z) - Contrastive Learning for Unpaired Image-to-Image Translation [64.47477071705866]
画像から画像への変換では、出力の各パッチは、入力中の対応するパッチの内容を、ドメインに依存しない形で反映すべきである。
本研究では,両者の相互情報を最大化するために,コントラスト学習に基づく枠組みを提案する。
筆者らのフレームワークは、画質の向上とトレーニング時間の短縮を図りながら、画像から画像への翻訳設定の一方的な翻訳を可能にすることを実証している。
論文 参考訳(メタデータ) (2020-07-30T17:59:58Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。