論文の概要: BargainNet: Background-Guided Domain Translation for Image Harmonization
- arxiv url: http://arxiv.org/abs/2009.09169v2
- Date: Sat, 3 Apr 2021 14:56:09 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-16 21:29:36.196396
- Title: BargainNet: Background-Guided Domain Translation for Image Harmonization
- Title(参考訳): bargainnet: 画像調和のための背景ガイド付きドメイン翻訳
- Authors: Wenyan Cong, Li Niu, Jianfu Zhang, Jing Liang, Liqing Zhang
- Abstract要約: 不調和な前景と背景は合成画像の品質を低下させる。
整合性を改善するために前景を調整した画像調和は、不可欠だが難しい課題である。
本稿では,新しいドメインコード抽出器とよく調整された三重項損失を用いた画像調和ネットワークを提案する。
- 参考スコア(独自算出の注目度): 26.370523451625466
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Image composition is a fundamental operation in image editing field. However,
unharmonious foreground and background downgrade the quality of composite
image. Image harmonization, which adjusts the foreground to improve the
consistency, is an essential yet challenging task. Previous deep learning based
methods mainly focus on directly learning the mapping from composite image to
real image, while ignoring the crucial guidance role that background plays. In
this work, with the assumption that the foreground needs to be translated to
the same domain as background, we formulate image harmonization task as
background-guided domain translation. Therefore, we propose an image
harmonization network with a novel domain code extractor and well-tailored
triplet losses, which could capture the background domain information to guide
the foreground harmonization. Extensive experiments on the existing image
harmonization benchmark demonstrate the effectiveness of our proposed method.
Code is available at https://github.com/bcmi/BargainNet.
- Abstract(参考訳): 画像合成は画像編集分野における基本的な操作である。
しかし、不調和な前景と背景は合成画像の品質を低下させる。
整合性を改善するために前景を調整した画像調和は、不可欠だが難しい課題である。
従来のディープラーニングベースの方法は、主に複合画像から実画像へのマッピングを直接学習することにフォーカスしているが、背景が果たす重要なガイダンスの役割を無視している。
本研究は,前景を背景と同じ領域に翻訳する必要があると仮定して,画像調和タスクを背景誘導ドメイン翻訳として定式化する。
そこで本研究では,新しいドメインコード抽出器と高度に調整されたトリプレットロスを備えた画像調和ネットワークを提案し,背景領域情報をキャプチャしてフォアグラウンド調和を誘導する。
既存の画像調和ベンチマークにおいて,提案手法の有効性を示す実験を行った。
コードはhttps://github.com/bcmi/bargainnetで入手できる。
関連論文リスト
- Segment Anything Model Meets Image Harmonization [13.415810438244788]
合成画像の前景を調整して背景をシームレスに整合させることを目的とした画像合成において,画像調和は重要な技術である。
現在の手法では、グローバルレベルまたはピクセルレベルの特徴マッチングが採用されている。
本研究では,前景と背景特徴の視覚的一貫性学習を導くために,事前学習したセグメンテーションモデル(SAM)によって出力されるセグメンテーションマップを利用する意味誘導型領域認識型インスタンス正規化(SRIN)を提案する。
論文 参考訳(メタデータ) (2023-12-20T02:57:21Z) - Intrinsic Harmonization for Illumination-Aware Compositing [0.7366405857677227]
固有画像領域で定式化された自己教師付き照明調和方式を提案する。
まず、中間レベルの視覚表現から簡単な大域照明モデルを推定し、前景領域の粗いシェーディングを生成する。
ネットワークはこの推論シェーディングを洗練し、背景のシーンと整合する再シェーディングを生成する。
論文 参考訳(メタデータ) (2023-12-06T18:59:03Z) - Painterly Image Harmonization via Adversarial Residual Learning [37.78751164466694]
画家的なイメージは 背景の絵のスタイルを 前景の物体に 転送することを目的としています
本研究では,前景特徴写像と背景特徴写像の間の領域ギャップを埋めるために,逆学習を用いる。
論文 参考訳(メタデータ) (2023-11-15T01:53:46Z) - Image Harmonization with Region-wise Contrastive Learning [51.309905690367835]
本稿では,外部スタイルの融合と領域単位のコントラスト学習方式を備えた新しい画像調和フレームワークを提案する。
提案手法は, 前景と背景の相互情報を最大化することにより, 対応する正と負のサンプルをまとめることを試みる。
論文 参考訳(メタデータ) (2022-05-27T15:46:55Z) - SSH: A Self-Supervised Framework for Image Harmonization [97.16345684998788]
我々は、編集せずに「自由」な自然画像だけで訓練できる新しい自己改善調和フレームワーク(SSH)を提案する。
提案したSSHは,基準指標,視覚的品質,主観的ユーザスタディにおいて,従来の最先端手法よりも優れていた。
論文 参考訳(メタデータ) (2021-08-15T19:51:33Z) - Region-aware Adaptive Instance Normalization for Image Harmonization [14.77918186672189]
フォトリアリスティックな合成画像を得るためには、背景と互換性のある前景の外観と視覚スタイルを調整する必要がある。
合成画像の調和のための既存のディープラーニング手法は、合成画像から実画像へのマッピングネットワークを直接学習する。
本研究では、背景から視覚スタイルを明示的に定式化し、前景に適応的に適用する、領域対応適応型インスタンス正規化(RAIN)モジュールを提案する。
論文 参考訳(メタデータ) (2021-06-05T09:57:17Z) - Controllable Person Image Synthesis with Spatially-Adaptive Warped
Normalization [72.65828901909708]
制御可能な人物画像生成は、望ましい属性を持つ現実的な人間の画像を作成することを目的としている。
本稿では,学習フロー場とワープ変調パラメータを統合した空間適応型ワープ正規化(SAWN)を提案する。
本稿では,テクスチャ・トランスファータスクの事前学習モデルを洗練するための,新たな自己学習部分置換戦略を提案する。
論文 参考訳(メタデータ) (2021-05-31T07:07:44Z) - Adversarial Image Composition with Auxiliary Illumination [53.89445873577062]
本稿では,現実的な画像合成を実現するためのAIC-Netを提案する。
影の発生と前景の移動を両立させる新しい分岐生成機構を提案する。
歩行者と自動車のコンポジションタスクに関する実験により,提案したAIC-Netが優れたコンポジション性能を実現することを示す。
論文 参考訳(メタデータ) (2020-09-17T12:58:16Z) - Domain Adaptation for Image Dehazing [72.15994735131835]
既存のほとんどの方法は、合成ヘイズ画像のデハージングモデルを訓練するが、ドメインシフトによる実際のヘイズ画像の一般化は困難である。
画像変換モジュールと2つの画像デハージングモジュールからなるドメイン適応パラダイムを提案する。
実世界の合成画像と実世界の画像の両方で実験結果から,我々のモデルは最先端の脱ハージングアルゴリズムに対して好適に機能することが示された。
論文 参考訳(メタデータ) (2020-05-10T13:54:56Z) - BachGAN: High-Resolution Image Synthesis from Salient Object Layout [78.51640906030244]
本稿では、より実用的な画像生成のための新しい課題である、有能なオブジェクトレイアウトからの高品質な画像合成を提案する。
i) セグメンテーションマップ入力なしできめ細かい詳細と現実的なテクスチャを生成する方法、(ii) バックグラウンドを作成してスタンドアロンのオブジェクトにシームレスに織り込む方法である。
幻影背景表現を動的に生成することにより,高解像度画像をフォトリアリスティック・フォアグラウンドと積分背景の両方で合成することができる。
論文 参考訳(メタデータ) (2020-03-26T00:54:44Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。