論文の概要: GRIG: Few-Shot Generative Residual Image Inpainting
- arxiv url: http://arxiv.org/abs/2304.12035v1
- Date: Mon, 24 Apr 2023 12:19:06 GMT
- ステータス: 処理完了
- システム内更新日: 2023-04-25 15:03:22.918283
- Title: GRIG: Few-Shot Generative Residual Image Inpainting
- Title(参考訳): GRIG:残像の残像のインペインティング
- Authors: Wanglong Lu, Xianta Jiang, Xiaogang Jin, Yong-Liang Yang, Minglun
Gong, Tao Wang, Kaijie Shi, and Hanli Zhao
- Abstract要約: そこで本研究では,高画質な残像塗装法を新たに提案する。
中心となる考え方は、特徴抽出のために畳み込みニューラルネットワーク(CNN)を組み込んだ反復的残留推論手法を提案することである。
また, 忠実なテクスチャと詳細な外観を創出するための, フォージェリーパッチ対逆訓練戦略を提案する。
- 参考スコア(独自算出の注目度): 27.252855062283825
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Image inpainting is the task of filling in missing or masked region of an
image with semantically meaningful contents. Recent methods have shown
significant improvement in dealing with large-scale missing regions. However,
these methods usually require large training datasets to achieve satisfactory
results and there has been limited research into training these models on a
small number of samples. To address this, we present a novel few-shot
generative residual image inpainting method that produces high-quality
inpainting results. The core idea is to propose an iterative residual reasoning
method that incorporates Convolutional Neural Networks (CNNs) for feature
extraction and Transformers for global reasoning within generative adversarial
networks, along with image-level and patch-level discriminators. We also
propose a novel forgery-patch adversarial training strategy to create faithful
textures and detailed appearances. Extensive evaluations show that our method
outperforms previous methods on the few-shot image inpainting task, both
quantitatively and qualitatively.
- Abstract(参考訳): イメージインペインティング(image inpainting)とは、画像の欠落した領域を意味的に意味のある内容で埋め込む作業である。
近年,大規模欠落領域の処理が大幅に改善されている。
しかしながら、これらの手法は通常、十分な結果を得るために大規模なトレーニングデータセットを必要とし、少数のサンプルでこれらのモデルをトレーニングする研究は限られている。
そこで本研究では, 高品質な塗装結果を生成する, 新規な少数ショット生成残像塗装法を提案する。
核となるアイデアは、画像レベルおよびパッチレベルの判別器とともに、生成的敵ネットワーク内のグローバル推論のための特徴抽出とトランスフォーマーのために畳み込みニューラルネットワーク(cnns)を組み込んだ反復的残差推論手法を提案することである。
また,忠実なテクスチャと詳細な外観を作り出すために,新しいフォージェリー・パッチ・アドバーサリー・トレーニング戦略を提案する。
広範に評価した結果,本手法は定量的,質的にも従来手法よりも優れていることがわかった。
関連論文リスト
- Coherent and Multi-modality Image Inpainting via Latent Space Optimization [61.99406669027195]
PILOT(intextbfPainting vtextbfIa textbfOptextbfTimization)は、新しいテキストセマンティック中央化とテキストセマンティック保存損失に基づく最適化手法である。
本手法は,背景とのコヒーレンスを維持しつつ,ユーザが提供するプロンプトに対して高い忠実度を示す塗装領域を生成できる潜時空間を探索する。
論文 参考訳(メタデータ) (2024-07-10T19:58:04Z) - BrushNet: A Plug-and-Play Image Inpainting Model with Decomposed
Dual-Branch Diffusion [61.90969199199739]
BrushNetは、ピクセルレベルのマスク付きイメージ機能を事前訓練されたDMに埋め込むために設計された、新しいプラグアンドプレイデュアルブランチモデルである。
BrushNetは、画像品質、マスク領域保存、テキストコヒーレンスを含む7つの主要な指標で、既存のモデルよりも優れたパフォーマンスを実現している。
論文 参考訳(メタデータ) (2024-03-11T17:59:31Z) - Active Generation for Image Classification [45.93535669217115]
本稿では,モデルのニーズと特徴に着目し,画像生成の効率性に対処することを提案する。
能動学習の中心的傾向として,ActGenという手法が,画像生成のトレーニング・アウェア・アプローチを取り入れている。
論文 参考訳(メタデータ) (2024-03-11T08:45:31Z) - An Analysis of Generative Methods for Multiple Image Inpainting [4.234843176066354]
塗り絵は、観察者が検出できない方法で、欠落した領域のイメージを復元することを指す。
我々は,多彩なインペイントのための学習に基づく画像補完手法に着目する。
論文 参考訳(メタデータ) (2022-05-04T15:54:08Z) - Learning Enriched Features for Fast Image Restoration and Enhancement [166.17296369600774]
本稿では,ネットワーク全体を通して空間的精度の高い高解像度表現を維持することを目的とする。
我々は、高解像度の空間的詳細を同時に保存しながら、複数のスケールからの文脈情報を組み合わせた豊富な特徴集合を学習する。
提案手法は,デフォーカス・デブロアリング,画像デノイング,超解像,画像強調など,さまざまな画像処理タスクに対して,最先端の処理結果を実現する。
論文 参考訳(メタデータ) (2022-04-19T17:59:45Z) - Improve Deep Image Inpainting by Emphasizing the Complexity of Missing
Regions [20.245637164975594]
本稿では,古典的画像複雑性メトリクスの助けを借りて,ディープイメージのインペイントモデルを強化する。
学習手順におけるバッチ選択を導くために、不足複雑性と前方損失からなる知識支援指標を示す。
我々は,最近開発された様々なデータセットに対する画像インペイントモデルの改良を実験的に実証した。
論文 参考訳(メタデータ) (2022-02-13T09:14:52Z) - Restore from Restored: Single-image Inpainting [9.699531255678856]
本論文では,絵画ネットワークにおける自己監督型微調整アルゴリズムについて述べる。
入力画像内の既存の自己相似パッチを利用して,事前学習したネットワークのパラメータをアップグレードする。
公開ベンチマークデータセットで最先端のインペインティング結果を達成します。
論文 参考訳(メタデータ) (2021-02-16T10:59:28Z) - Learning degraded image classification with restoration data fidelity [0.0]
広く使用されている4つの分類ネットワークにおける分解型およびレベルの影響について検討する。
本稿では,事前学習したネットワークで得られた画像特徴を忠実度マップを用いて校正する手法を提案する。
その結果,提案手法は画像劣化による影響を緩和する有望な解であることがわかった。
論文 参考訳(メタデータ) (2021-01-23T23:47:03Z) - Invertible Image Rescaling [118.2653765756915]
Invertible Rescaling Net (IRN) を開発した。
我々は、ダウンスケーリングプロセスにおいて、指定された分布に従う潜在変数を用いて、失われた情報の分布をキャプチャする。
論文 参考訳(メタデータ) (2020-05-12T09:55:53Z) - Learning Enriched Features for Real Image Restoration and Enhancement [166.17296369600774]
畳み込みニューラルネットワーク(CNN)は、画像復元作業における従来のアプローチよりも劇的に改善されている。
ネットワーク全体を通して空間的精度の高い高解像度表現を維持することを目的とした,新しいアーキテクチャを提案する。
提案手法は,高解像度の空間的詳細を同時に保存しながら,複数のスケールからの文脈情報を組み合わせた豊富な特徴集合を学習する。
論文 参考訳(メタデータ) (2020-03-15T11:04:30Z) - Image Fine-grained Inpainting [89.17316318927621]
拡張畳み込みの密結合を利用してより大きく効果的な受容場を得る一段階モデルを提案する。
この効率的なジェネレータをよく訓練するために、頻繁に使用されるVGG特徴整合損失を除いて、新しい自己誘導回帰損失を設計する。
また、局所的・グローバルな分枝を持つ識別器を用いて、局所的・グローバルな内容の整合性を確保する。
論文 参考訳(メタデータ) (2020-02-07T03:45:25Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。