論文の概要: High-Quality Face Caricature via Style Translation
- arxiv url: http://arxiv.org/abs/2311.13338v1
- Date: Wed, 22 Nov 2023 12:03:33 GMT
- ステータス: 処理完了
- システム内更新日: 2023-11-23 15:18:38.563013
- Title: High-Quality Face Caricature via Style Translation
- Title(参考訳): スタイル翻訳による高品質顔画像
- Authors: Lamyanba Laishram, Muhammad Shaheryar, Jong Taek Lee, and Soon Ki Jung
- Abstract要約: 実世界での使用に適した,高品質で不対面の顔似似顔絵法を提案する。
顔の特徴の誇張と外観のスタイル化を2段階のプロセスで達成する。
Faceキャラクチュアプロジェクションは、実面と似顔で訓練されたエンコーダと、事前訓練されたジェネレータを用いて、実面と似顔を投影する。
- 参考スコア(独自算出の注目度): 1.3457834965263997
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Caricature is an exaggerated form of artistic portraiture that accentuates
unique yet subtle characteristics of human faces. Recently, advancements in
deep end-to-end techniques have yielded encouraging outcomes in capturing both
style and elevated exaggerations in creating face caricatures. Most of these
approaches tend to produce cartoon-like results that could be more practical
for real-world applications. In this study, we proposed a high-quality,
unpaired face caricature method that is appropriate for use in the real world
and uses computer vision techniques and GAN models. We attain the exaggeration
of facial features and the stylization of appearance through a two-step
process: Face caricature generation and face caricature projection. The face
caricature generation step creates new caricature face datasets from real
images and trains a generative model using the real and newly created
caricature datasets. The Face caricature projection employs an encoder trained
with real and caricature faces with the pretrained generator to project real
and caricature faces. We perform an incremental facial exaggeration from the
real image to the caricature faces using the encoder and generator's latent
space. Our projection preserves the facial identity, attributes, and
expressions from the input image. Also, it accounts for facial occlusions, such
as reading glasses or sunglasses, to enhance the robustness of our model.
Furthermore, we conducted a comprehensive comparison of our approach with
various state-of-the-art face caricature methods, highlighting our process's
distinctiveness and exceptional realism.
- Abstract(参考訳): 似顔絵は、人間の顔の独特で微妙な特徴を強調する、誇張された芸術的肖像画の形式である。
近年、エンド・ツー・エンド技術の進歩は、顔の似顔絵を作る際のスタイルと誇張の高まりの両方を捉えて奨励する結果をもたらしている。
これらのアプローチの多くは、現実世界のアプリケーションでより実用的な漫画のような結果を生み出す傾向にある。
本研究では,実世界での使用に適し,コンピュータビジョン技術とganモデルを用いて,高品質で対向しない顔似顔絵法を提案する。
顔の特徴の誇張と外観のスタイル化を2段階のプロセスで実現した。
顔似顔絵生成ステップは、実画像から新たな似顔データセットを作成し、実画像と新たに作成された似顔絵データセットを用いて生成モデルを訓練する。
Faceキャラクチュアプロジェクションは、実面と似顔で訓練されたエンコーダと、事前訓練されたジェネレータを用いて、実面と似顔を投影する。
我々は,エンコーダとジェネレータの潜伏空間を用いて,実画像から似顔顔への増分的な顔強調を行う。
我々の投影は入力画像から顔のアイデンティティ、属性、表情を保存します。
また, 本モデルのロバスト性を高めるために, 眼鏡やサングラスなどの顔面咬合も考慮している。
さらに,本手法と最先端顔似顔絵法を包括的に比較し,プロセスの特徴と例外的現実主義を強調した。
関連論文リスト
- FaceChain: A Playground for Human-centric Artificial Intelligence
Generated Content [36.48960592782015]
FaceChainは、パーソナライズされたポートレート生成フレームワークで、一連のカスタマイズされた画像生成モデルと、顔に関連する知覚理解モデルの豊富なセットを組み合わせる。
我々は、複数のSOTAフェイスモデルを生成手順に注入し、従来のソリューションと比較して、より効率的なラベルタグ付け、データ処理、モデル後処理を実現する。
FaceChainをベースとして、仮想トライオンや2Dトーキングヘッドなど、その価値をよりよく示すための、より広いグラウンドを構築するためのいくつかのアプリケーションも開発しています。
論文 参考訳(メタデータ) (2023-08-28T02:20:44Z) - 3D Cartoon Face Generation with Controllable Expressions from a Single
GAN Image [142.047662926209]
我々は、単一の2D GAN生成人間の顔から3次元マンガの顔形状を生成する。
我々は3次元マンガの顔の形状を再構築できるように、ポーズや照明の異なる画像を生成するために潜時符号を操作する。
論文 参考訳(メタデータ) (2022-07-29T01:06:21Z) - Quality Metric Guided Portrait Line Drawing Generation from Unpaired
Training Data [88.78171717494688]
本研究では,顔画像から肖像画への自動変換手法を提案する。
本手法は,(1)1つのネットワークを用いて複数のスタイルで高品質な肖像画を生成することを学習し,(2)トレーニングデータに見つからない「新しいスタイル」の肖像画を生成する。
論文 参考訳(メタデータ) (2022-02-08T06:49:57Z) - Face sketch to photo translation using generative adversarial networks [1.0312968200748118]
我々は、訓練済みの顔画像生成モデルを用いて、高品質な自然顔写真を合成する。
入力スケッチから抽出した顔の特徴を、顔生成モデルの潜在空間のベクトルにマッピングするネットワークを訓練する。
提案モデルでは,SSIM指数で0.655,97.59%のランク-1顔認識率が得られた。
論文 参考訳(メタデータ) (2021-10-23T20:01:20Z) - Image-to-Video Generation via 3D Facial Dynamics [78.01476554323179]
静止画像から様々な映像を生成するために多目的モデルであるFaceAnimeを提案する。
私たちのモデルは、顔ビデオや顔ビデオの予測など、さまざまなAR/VRやエンターテイメントアプリケーションに汎用的です。
論文 参考訳(メタデータ) (2021-05-31T02:30:11Z) - DeepFacePencil: Creating Face Images from Freehand Sketches [77.00929179469559]
既存の画像から画像への変換には、大規模なスケッチと画像のデータセットが必要である。
本稿では,手描きスケッチから写真リアルな顔画像を生成するための効果的なツールであるDeepFacePencilを提案する。
論文 参考訳(メタデータ) (2020-08-31T03:35:21Z) - Modeling Caricature Expressions by 3D Blendshape and Dynamic Texture [58.78290175562601]
本稿では,アーティストが描いた似顔絵を正規表現に従って変形させる問題に対する解法を提案する。
本ソリューションの鍵となるのは,従来の3DMM表現をキャラクチュア領域に拡張した,キャラクチュア表現をモデル化する新しい手法である。
提案手法の有効性を実証した。
論文 参考訳(メタデータ) (2020-08-13T06:31:01Z) - FaR-GAN for One-Shot Face Reenactment [20.894596219099164]
本稿では,任意の音源の顔画像とターゲット表現のみを入力として用いた一発顔再現モデルFaR-GANを提案する。
提案手法は,音源の同一性,表情,頭部ポーズ,さらには画像背景についても仮定しない。
論文 参考訳(メタデータ) (2020-05-13T16:15:37Z) - AutoToon: Automatic Geometric Warping for Face Cartoon Generation [0.0]
本稿では,画像のワープ成分に高品質なワープを付与する,最初の教師付き深層学習手法であるAutoToonを提案する。
先行技術とは対照的に、SENetと空間トランスフォーマーモジュールを活用し、アーティストのワープフィールドを直接訓練する。
顔の細部を保ちながら顔の特徴の識別を増幅する魅力ある誇張を実現する。
論文 参考訳(メタデータ) (2020-04-06T02:27:51Z) - 3D-CariGAN: An End-to-End Solution to 3D Caricature Generation from Face
Photos [78.14395302760148]
本稿では,通常の2次元顔画像から直接高品質な3D画像を生成するエンド・ツー・エンドのディープ・ニューラルネットワークモデルを提案する。
新たな2段階のユーザスタディを含む実験により,通常の顔写真から直接高品質な3D画像を生成することができることがわかった。
論文 参考訳(メタデータ) (2020-03-15T14:42:15Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。