論文の概要: GaussianAvatar-Editor: Photorealistic Animatable Gaussian Head Avatar Editor
- arxiv url: http://arxiv.org/abs/2501.09978v1
- Date: Fri, 17 Jan 2025 06:40:20 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-01-20 13:59:41.754536
- Title: GaussianAvatar-Editor: Photorealistic Animatable Gaussian Head Avatar Editor
- Title(参考訳): Gaussian Avatar-Editor: Photorealistic Animatable Gaussian Head Avatar Editor
- Authors: Xiangyue Liu, Kunming Luo, Heng Li, Qi Zhang, Yuan Liu, Li Yi, Ping Tan,
- Abstract要約: アニマタブルなガウシアンヘッドアバターのテキスト駆動編集のための革新的なフレームワークを提案する。
Gaussian Avatar-Editorは、表現、ポーズ、視点で完全に制御できる。
- 参考スコア(独自算出の注目度): 53.58201080040624
- License:
- Abstract: We introduce GaussianAvatar-Editor, an innovative framework for text-driven editing of animatable Gaussian head avatars that can be fully controlled in expression, pose, and viewpoint. Unlike static 3D Gaussian editing, editing animatable 4D Gaussian avatars presents challenges related to motion occlusion and spatial-temporal inconsistency. To address these issues, we propose the Weighted Alpha Blending Equation (WABE). This function enhances the blending weight of visible Gaussians while suppressing the influence on non-visible Gaussians, effectively handling motion occlusion during editing. Furthermore, to improve editing quality and ensure 4D consistency, we incorporate conditional adversarial learning into the editing process. This strategy helps to refine the edited results and maintain consistency throughout the animation. By integrating these methods, our GaussianAvatar-Editor achieves photorealistic and consistent results in animatable 4D Gaussian editing. We conduct comprehensive experiments across various subjects to validate the effectiveness of our proposed techniques, which demonstrates the superiority of our approach over existing methods. More results and code are available at: [Project Link](https://xiangyueliu.github.io/GaussianAvatar-Editor/).
- Abstract(参考訳): ガウシアン・アバター・エディタ(Gaussian Avatar-Editor)は,ガウシアン・アバター(Gaussian Head Avatar)のテキスト駆動編集のための革新的なフレームワークであり,表現,ポーズ,視点で完全に制御できる。
静的な3次元ガウシアン編集とは異なり、アニマタブルな4Dガウシアンアバターは、動きの排除と空間的不整合に関連する課題を提示する。
これらの問題に対処するために、重み付きアルファブレンディング方程式(WABE)を提案する。
この関数は、可視ガウスの混合重量を増大させ、非可視ガウスの影響を抑え、編集中の運動閉塞を効果的に処理する。
さらに,編集品質の向上と4次元整合性確保のために,条件付き対数学習を編集プロセスに組み込む。
この戦略は、編集結果を洗練し、アニメーション全体の一貫性を維持するのに役立つ。
これらの手法を統合することで、ガウスアン・アバター編集装置は4次元ガウス編集においてフォトリアリスティックで一貫した結果が得られる。
提案手法の有効性を検証するため,様々な被験者を対象とした総合的な実験を行い,既存手法に対するアプローチの優位性を実証した。
Project Link] (https://xiangyueliu.github.io/GaussianAvatar-Editor/)。
関連論文リスト
- Drag Your Gaussian: Effective Drag-Based Editing with Score Distillation for 3D Gaussian Splatting [55.14822004410817]
DYGは3次元ガウススプラッティングのための効果的な3次元ドラッグベース編集法である。
3次元マスクと一対の制御点を入力して編集範囲を正確に制御できる。
DYGは暗黙三面体表現の強さを統合し、編集結果の幾何学的足場を確立する。
論文 参考訳(メタデータ) (2025-01-30T18:51:54Z) - Generating Editable Head Avatars with 3D Gaussian GANs [57.51487984425395]
従来の3D-Aware Generative Adversarial Network (GAN) は、フォトリアリスティックでビューに一貫性のある3Dヘッド合成を実現する。
本稿では,3次元ガウススプラッティング(3DGS)を明示的な3次元表現として取り入れることで,3次元ヘッドアバターの編集性とアニメーション制御を向上する手法を提案する。
提案手法は,最先端の制御性を備えた高品質な3D認識合成を実現する。
論文 参考訳(メタデータ) (2024-12-26T10:10:03Z) - GSEditPro: 3D Gaussian Splatting Editing with Attention-based Progressive Localization [11.170354299559998]
本稿では,ユーザがテキストプロンプトのみを使用して,創造的で正確な編集を行うことのできる,新しい3Dシーン編集フレームワークであるGSEditProを提案する。
レンダリング中に各ガウス語に意味ラベルを追加するために、注意に基づくプログレッシブなローカライゼーションモジュールを導入する。
これにより、T2Iモデルのクロスアテンション層から派生した編集プロンプトとの関連性に基づいて、ガウスアンを分類することで、編集領域の正確なローカライズが可能になる。
論文 参考訳(メタデータ) (2024-11-15T08:25:14Z) - DragGaussian: Enabling Drag-style Manipulation on 3D Gaussian Representation [57.406031264184584]
DragGaussianは、3D Gaussian Splattingをベースにした3Dオブジェクトのドラッグ編集フレームワークである。
我々の貢献は、新しいタスクの導入、インタラクティブなポイントベース3D編集のためのDragGaussianの開発、質的かつ定量的な実験によるその効果の包括的検証などである。
論文 参考訳(メタデータ) (2024-05-09T14:34:05Z) - Gaussian Frosting: Editable Complex Radiance Fields with Real-Time Rendering [22.620566178078008]
リアルタイムに複雑な3Dエフェクトの高品質なレンダリングと編集を行うメッシュベースの新しい表現を提案する。
私たちはこの層をガウシアン・フロスティングと呼びます。
本手法が様々な合成シーン, 実シーンにおいて有効であることを示し, 既存の表面ベース手法よりも優れていることを示す。
論文 参考訳(メタデータ) (2024-03-21T16:53:03Z) - GaussianEditor: Editing 3D Gaussians Delicately with Text Instructions [90.38892097863814]
本稿では,3Dガウスアンによる3Dシーンをテキストで微妙に編集する,GaussianEditorという体系的フレームワークを提案する。
我々のフレームワークは、トレーニング速度をはるかに速くしながら、従来の方法よりも繊細で正確な3Dシーンの編集を実現できる。
論文 参考訳(メタデータ) (2023-11-27T17:58:21Z) - GaussianEditor: Swift and Controllable 3D Editing with Gaussian
Splatting [66.08674785436612]
3D編集は、ゲームや仮想現実など、多くの分野で重要な役割を担っている。
メッシュやポイントクラウドのような表現に依存した従来の3D編集手法は、複雑なシーンを現実的に描写するのに不足することが多い。
本稿では,新しい3D表現であるGaussian Splatting(GS)に基づく,革新的で効率的な3D編集アルゴリズムであるGaussianEditorを提案する。
論文 参考訳(メタデータ) (2023-11-24T14:46:59Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。