論文の概要: Restore from Restored: Single-image Inpainting
- arxiv url: http://arxiv.org/abs/2110.12822v1
- Date: Mon, 25 Oct 2021 11:38:51 GMT
- ステータス: 処理完了
- システム内更新日: 2021-10-26 14:12:15.534931
- Title: Restore from Restored: Single-image Inpainting
- Title(参考訳): 復元からの復元:シングルイメージインペインティング
- Authors: Eunhye Lee, Jeongmu Kim, Jisu Kim, Tae Hyun Kim
- Abstract要約: インペイントネットワークのための,新しい,効率的な自己教師型微調整アルゴリズムを提案する。
既存の自己相似パッチを用いて,事前学習した塗装ネットワークのパラメータを更新する。
公開されているベンチマークデータセット上で、最先端の塗装結果を得る。
- 参考スコア(独自算出の注目度): 9.699531255678856
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Recent image inpainting methods have shown promising results due to the power
of deep learning, which can explore external information available from the
large training dataset. However, many state-of-the-art inpainting networks are
still limited in exploiting internal information available in the given input
image at test time. To mitigate this problem, we present a novel and efficient
self-supervised fine-tuning algorithm that can adapt the parameters of fully
pre-trained inpainting networks without using ground-truth target images. We
update the parameters of the pre-trained state-of-the-art inpainting networks
by utilizing existing self-similar patches (i.e., self-exemplars) within the
given input image without changing the network architecture and improve the
inpainting quality by a large margin. Qualitative and quantitative experimental
results demonstrate the superiority of the proposed algorithm, and we achieve
state-of-the-art inpainting results on publicly available benchmark datasets.
- Abstract(参考訳): 近年のイメージインペインティング手法は,大規模なトレーニングデータセットから得られる外部情報を探索する深層学習の力によって,有望な結果を示している。
しかし、最先端のインペインティングネットワークの多くは、テスト時に与えられた入力画像で利用可能な内部情報を活用できない。
この問題を緩和するために, 地中目標画像を用いることなく, 完全に事前学習された塗装網のパラメータを適応できる, 新規で効率的な自己教師型微調整アルゴリズムを提案する。
入力画像中の既存の自己相似パッチ(例えば、自己例パッチ)をネットワークアーキテクチャを変更することなく利用することにより、事前学習した最先端の塗装ネットワークのパラメータを更新し、大きなマージンで塗装品質を向上する。
定性的かつ定量的な実験結果は,提案アルゴリズムの優位性を証明し,公開ベンチマークデータセットの最先端の塗装結果を得る。
関連論文リスト
- PrefPaint: Aligning Image Inpainting Diffusion Model with Human Preference [62.72779589895124]
画像インペイントのための拡散モデルと人間の審美基準との整合性を、強化学習フレームワークを用いて初めて試みる。
我々は、人間の好みを付加した約51,000枚の画像からなるデータセットで報酬モデルを訓練する。
画像拡張や3次元再構成などの下流タスクの塗装比較実験により, 提案手法の有効性が示された。
論文 参考訳(メタデータ) (2024-10-29T11:49:39Z) - Dense Feature Interaction Network for Image Inpainting Localization [28.028361409524457]
画像の悪質な操作において、画像内容の隠蔽や改ざんに使用することができる。
既存の手法は主に基本的なエンコーダ・デコーダ構造に依存しており、多くの場合、偽陽性が多くなる。
本稿では,Dense Feature Interaction Network (DeFI-Net) に基づく新しい塗り絵検出手法について述べる。
論文 参考訳(メタデータ) (2024-08-05T02:35:13Z) - GRIG: Few-Shot Generative Residual Image Inpainting [27.252855062283825]
そこで本研究では,高画質な残像塗装法を新たに提案する。
中心となる考え方は、特徴抽出のために畳み込みニューラルネットワーク(CNN)を組み込んだ反復的残留推論手法を提案することである。
また, 忠実なテクスチャと詳細な外観を創出するための, フォージェリーパッチ対逆訓練戦略を提案する。
論文 参考訳(メタデータ) (2023-04-24T12:19:06Z) - Visual Prompting via Image Inpainting [104.98602202198668]
そこで本研究では,NLPにインスパイアされた新しいタスクの入力出力画像例と新しい入力画像の視覚的プロンプトについて検討する。
事前学習したモデルに視覚的プロンプトを適用し、様々なダウンストリームイメージ・ツー・イメージタスクで結果を示す。
論文 参考訳(メタデータ) (2022-09-01T17:59:33Z) - Perceptual Artifacts Localization for Inpainting [60.5659086595901]
そこで本研究では,知覚的アーティファクトの自動セグメンテーションの学習タスクを提案する。
データセット上で高度なセグメンテーションネットワークをトレーニングし、インペイントされた画像内のインペイントされたアーティファクトを確実にローカライズする。
また, 対象領域と対象領域全体との比率である知覚人工物比 (PAR) という新しい評価指標を提案する。
論文 参考訳(メタデータ) (2022-08-05T18:50:51Z) - Learning Prior Feature and Attention Enhanced Image Inpainting [63.21231753407192]
本稿では,事前学習に基づくMasked AutoEncoder(MAE)を塗装モデルに組み込む。
マスク付き領域とマスキングされていない領域間の長距離依存性をより学習させるために,MAE の注意点を用いた手法を提案する。
論文 参考訳(メタデータ) (2022-08-03T04:32:53Z) - Restore from Restored: Single-image Inpainting [9.699531255678856]
本論文では,絵画ネットワークにおける自己監督型微調整アルゴリズムについて述べる。
入力画像内の既存の自己相似パッチを利用して,事前学習したネットワークのパラメータをアップグレードする。
公開ベンチマークデータセットで最先端のインペインティング結果を達成します。
論文 参考訳(メタデータ) (2021-02-16T10:59:28Z) - Image inpainting using frequency domain priors [35.54138025375951]
本稿では,周波数領域情報を用いた新しい画像塗装手法を提案する。
提案手法について,CelebA,Paris Streetview,DTDテクスチャデータセットを用いて検討した。
論文 参考訳(メタデータ) (2020-12-03T11:08:13Z) - High-Resolution Image Inpainting with Iterative Confidence Feedback and
Guided Upsampling [122.06593036862611]
既存の画像塗装法は、実アプリケーションで大きな穴を扱う際に、しばしばアーティファクトを生成する。
本稿では,フィードバック機構を備えた反復インペイント手法を提案する。
実験により,本手法は定量評価と定性評価の両方において既存手法よりも有意に優れていた。
論文 参考訳(メタデータ) (2020-05-24T13:23:45Z) - Very Long Natural Scenery Image Prediction by Outpainting [96.8509015981031]
アウトペイントには2つの課題があるため、あまり注意を払わない。
第一の課題は、生成された画像と元の入力の間の空間的および内容的整合性を維持する方法である。
第2の課題は、生成した結果の高品質を維持する方法です。
論文 参考訳(メタデータ) (2019-12-29T16:29:01Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。