論文の概要: Total-Editing: Head Avatar with Editable Appearance, Motion, and Lighting

• arxiv url: http://arxiv.org/abs/2505.20582v1
• Date: Mon, 26 May 2025 23:32:51 GMT
• ステータス: 翻訳完了
• システム内更新日: 2025-05-28 17:05:58.321281
• Title: Total-Editing: Head Avatar with Editable Appearance, Motion, and Lighting
• Title（参考訳）: 全編集:編集可能な外観、動き、照明を備えたヘッドアバター
• Authors: Yizhou Zhao, Chunjiang Liu, Haoyu Chen, Bhiksha Raj, Min Xu, Tadas Baltrusaitis, Mitch Rundle, HsiangTao Wu, Kamran Ghasedi,
• Abstract要約: トータル編集は、外観、動き、照明の正確な制御を可能にする統合された肖像画編集フレームワークである。 具体的には,内在分解機能を有するニューラルラジアンスデコーダを設計する。 また,アバター運動とシェーディング効果の時間的コヒーレンスを高めるために,移動最小二乗場を組み込んだ。
• 参考スコア（独自算出の注目度）: 39.44285683162209
• License: http://creativecommons.org/licenses/by/4.0/
• Abstract: Face reenactment and portrait relighting are essential tasks in portrait editing, yet they are typically addressed independently, without much synergy. Most face reenactment methods prioritize motion control and multiview consistency, while portrait relighting focuses on adjusting shading effects. To take advantage of both geometric consistency and illumination awareness, we introduce Total-Editing, a unified portrait editing framework that enables precise control over appearance, motion, and lighting. Specifically, we design a neural radiance field decoder with intrinsic decomposition capabilities. This allows seamless integration of lighting information from portrait images or HDR environment maps into synthesized portraits. We also incorporate a moving least squares based deformation field to enhance the spatiotemporal coherence of avatar motion and shading effects. With these innovations, our unified framework significantly improves the quality and realism of portrait editing results. Further, the multi-source nature of Total-Editing supports more flexible applications, such as illumination transfer from one portrait to another, or portrait animation with customized backgrounds.
• Abstract（参考訳）: 顔の再現とポートレートのリライティングは、肖像画編集において必須のタスクであるが、通常は、あまりシナジーを伴わずに、独立して対処される。 ほとんどの顔の再現法は動き制御とマルチビューの一貫性を優先し、ポートレートリライトはシェーディング効果の調整に重点を置いている。 幾何学的整合性と照明意識の両面を生かして,外観,動き,照明を正確に制御できる統合された肖像画編集フレームワークであるTotal-Editingを導入する。 具体的には、内在分解機能を有するニューラルラジアンスフィールドデコーダを設計する。 これにより、ポートレート画像やHDR環境マップからの照明情報をシームレスに合成ポートレートに統合することができる。 また,アバター運動とシェーディング効果の時空間コヒーレンスを高めるために,最小二乗変形場を移動させる。 これらの革新により、統合されたフレームワークは、ポートレート編集結果の品質とリアリズムを大幅に改善する。 さらに、Total-Editingのマルチソース性は、あるポートレートから別のポートレートへの照明伝達や、カスタマイズされた背景を持つポートレートアニメーションなど、より柔軟なアプリケーションをサポートする。

関連論文リスト

• RASA: Replace Anyone, Say Anything -- A Training-Free Framework for Audio-Driven and Universal Portrait Video Editing [82.132107140504]
  本稿では,多目的かつ適応可能な編集戦略を提供する,トレーニングフリーのユニバーサル・ポートレート・ビデオ編集フレームワークを提案する。 変更された第1参照フレームに設定されたポートレートの外観編集と、さまざまな音声に設定されたリップ編集をサポートする。 本モデルでは, 口唇編集作業において, より正確かつ同期的な唇運動を実現するとともに, 外観編集作業においてより柔軟な動き伝達を実現することができる。
  論文  参考訳（メタデータ） (2025-03-14T16:39:15Z)
• COMPOSE: Comprehensive Portrait Shadow Editing [25.727386174616868]
  COMPOSEは人間の肖像画のための新しい影編集パイプラインである。 形状、強度、位置などの影の属性を正確に制御する。 我々は,(1)この光源表現を画像から予測し,(2)この表現を用いて現実的な影を生成するモデルを訓練した。
  論文  参考訳（メタデータ） (2024-08-25T19:18:18Z)
• Lite2Relight: 3D-aware Single Image Portrait Relighting [87.62069509622226]
  Lite2Relightは、肖像画の3D一貫性のある頭部ポーズを予測できる新しいテクニックだ。 事前学習した幾何認識エンコーダと特徴アライメントモジュールを利用することで、入力画像を3D空間にマッピングする。 これには、髪、目、表情を含むフルヘッドの3D一貫性のある結果が含まれる。
  論文  参考訳（メタデータ） (2024-07-15T07:16:11Z)
• LightPainter: Interactive Portrait Relighting with Freehand Scribble [79.95574780974103]
  我々は、スクリブルベースのライティングシステムであるLightPainterを導入し、ユーザーが簡単にポートレート照明効果を操作できるようにする。 リライトモジュールをトレーニングするために,実際のユーザスクリブルを模倣する新しいスクリブルシミュレーション手法を提案する。 定量的および定性的な実験により,高品質でフレキシブルなポートレート照明編集機能を示す。
  論文  参考訳（メタデータ） (2023-03-22T23:17:11Z)
• NARRATE: A Normal Assisted Free-View Portrait Stylizer [42.38374601073052]
  NARRATEは、ポートレートライティングと視点をフォトリアリスティックな方法で同時に編集できる新しいパイプラインである。 実験により、NARRATEは、先行研究よりも、よりフォトリアリスティックで信頼性の高い結果が得られることを示した。 さまざまなAR/VRアプリケーションを支援するために,鮮明なフリービューの顔アニメーションと3D対応のライライザライゼーションを紹介した。
  論文  参考訳（メタデータ） (2022-07-03T07:54:05Z)
• Hierarchical Vectorization for Portrait Images [12.32304366243904]
  本稿では,画像を自動的に3階層の階層表現に変換するベクトル化手法を提案する。 基層は、鮮やかな幾何学的特徴と低周波色を特徴付けるスパース拡散曲線からなる。 中層は、仕様のハイライトと影を大きく編集可能なポアソン領域(PR)にエンコードし、ユーザーは直接照明を調整できる。 トップレベルには、高周波残基のための2種類のピクセルサイズのPRと、ピンプや色素化などの細部が含まれている。
  論文  参考訳（メタデータ） (2022-05-24T07:58:41Z)
• Relightable Neural Video Portrait [36.67623086400362]
  Photo-realistic Face Video portrait Reenactmentは、バーチャルプロダクションと多くのVR/AR体験の恩恵を受ける。 任意の背景と照明条件を持つターゲット俳優のポートレートビデオに,頭部ポーズと表情をソースアクターから転送する,リライタブルなニューラルビデオポートレート,同時リライティングと再現方式を提案する。
  論文  参考訳（メタデータ） (2021-07-30T16:20:45Z)
• Pixel Sampling for Style Preserving Face Pose Editing [53.14006941396712]
  ジレンマを解くための新しい2段階のアプローチとして,顔のポーズ操作のタスクを顔に塗布する手法を提案する。 入力面から画素を選択的にサンプリングし、その相対位置をわずかに調整することにより、顔編集結果は、画像スタイルとともにアイデンティティ情報を忠実に保持する。 3D顔のランドマークをガイダンスとして、3自由度(ヨー、ピッチ、ロール)で顔のポーズを操作できるので、より柔軟な顔のポーズ編集が可能になる。
  論文  参考訳（メタデータ） (2021-06-14T11:29:29Z)
• PIE: Portrait Image Embedding for Semantic Control [82.69061225574774]
  本稿では,StyleGANの潜在空間に実際の肖像画を埋め込むための最初のアプローチを提案する。 トレーニング済みのニューラルネットワークであるStyleRigは、3D形態素顔モデルの制御空間をGANの潜在空間にマッピングする。 アイデンティティエネルギー保存用語は、顔の整合性を維持しながら空間的コヒーレントな編集を可能にする。
  論文  参考訳（メタデータ） (2020-09-20T17:53:51Z)

関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。

指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。