論文の概要: FaceParts: Segmentation and Editing of Gaussian Splatting
- arxiv url: http://arxiv.org/abs/2605.13853v1
- Date: Wed, 25 Mar 2026 21:34:06 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-05-25 12:34:33.806314
- Title: FaceParts: Segmentation and Editing of Gaussian Splatting
- Title(参考訳): FaceParts: Gaussian Splatting のセグメンテーションと編集
- Abstract要約: ガウススティングアバターの教師なしセグメンテーションと編集のためのフレームワークであるFacePartsを提案する。
既存の2D法やメッシュ支援法とは異なり,本手法はガウス領域で直接動作し,アバターを意味的に一貫性のある顔部品に分解する。
この手法は、特徴のゆがみ、密度ベースのクラスタリング、FLAMEアンカレートされた部分転送を統合し、正確な編集とクロスアバター部分スワップを可能にする。
- 参考スコア(独自算出の注目度): 1.5616295667706617
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Facial editing is an important task with applications in entertainment, virtual reality, and digital avatars. Most existing approaches rely on generative models in the 2D image domain, while in 3D the task is typically performed through labor-intensive manual editing. We propose FaceParts, a framework for unsupervised segmentation and editing of Gaussian Splatting avatars. Unlike existing 2D or mesh-assisted methods, our approach operates directly in the Gaussian domain, decomposing avatars into semantically coherent facial parts without supervision. The method integrates feature disentanglement, density-based clustering, and FLAME-anchored part transfer, enabling precise editing and cross-avatar part swapping. Experiments on the NeRSemble dataset with 11 subjects demonstrate robust isolation of features such as beards, eyebrows, eyes and mustaches. Quantitative evaluation confirms that transferred segments adapt to pose and expression, while maintaining identity consistency (ID = 0.943), low Average Expression Distance (AED = 0.021) and low Average Pose Distance (APD = 0.004).
- Abstract(参考訳): 顔の編集はエンターテイメント、バーチャルリアリティー、デジタルアバターの応用において重要なタスクである。
既存のほとんどのアプローチは、2D画像領域における生成モデルに依存し、一方3Dでは、作業は労働集約的な手作業による編集によって行われる。
ガウススティングアバターの教師なしセグメンテーションと編集のためのフレームワークであるFacePartsを提案する。
既存の2D法やメッシュ支援法とは異なり,本手法はガウス領域で直接動作し,アバターを意味的に一貫性のある顔部品に分解する。
この手法は、特徴のゆがみ、密度ベースのクラスタリング、FLAMEアンカレートされた部分転送を統合し、正確な編集とクロスアバター部分スワップを可能にする。
11人の被験者によるNeRSembleデータセットの実験では、ひげ、まぶた、目、口ひげといった特徴の堅牢な分離が示されている。
平均表現距離 (AED = 0.021) と平均表現距離 (APD = 0.004) を維持しながら, 移動セグメントがポーズや表現に適応することを確認する定量的評価を行った。
関連論文リスト
- Edit3DGS: Unified Framework for Dynamic Head Editing via 2D Instruction-Guided Diffusion and 3D Gaussian Splatting [3.8101824866013523]
動的3Dヘッド編集のための統合フレームワークEdit3DGSを提案する。
本手法は,画像領域における意味制御性と,時間的に整合した3次元表現とを結合する。
論文 参考訳(メタデータ) (2026-06-16T02:26:20Z) - DipGuava: Disentangling Personalized Gaussian Features for 3D Head Avatars from Monocular Video [56.39805581764342]
DipGuavaは、モノクロビデオからパーソナライズされた属性を持つアバターを生成する新しい3Dガウスの頭部アバター作成方法である。
顔の外観を2つの相補的な構成要素に明示的に切り離し、構造化された2段階のパイプラインで訓練する最初の方法である。
広汎な実験で示されるように、視覚的品質と量的性能の両方において、従来手法よりも一貫して優れていた。
論文 参考訳(メタデータ) (2026-03-30T03:50:23Z) - ImHead: A Large-scale Implicit Morphable Model for Localized Head Modeling [71.3859346921118]
imHeadは、表現力のある3Dヘッドアバターだけでなく、顔の特徴の局所的な編集を容易にする新しい3DMMである。
imHeadをトレーニングするために、4Kの異なるアイデンティティの大規模なデータセットをキュレートする。
論文 参考訳(メタデータ) (2025-10-12T20:17:34Z) - PERSE: Personalized 3D Generative Avatars from A Single Portrait [18.069177711777662]
PERSEは、参照ポートレートからパーソナライズされた3D生成アバターを構築する方法である。
提案手法は,大規模な合成2Dビデオデータセットから始まる。
論文 参考訳(メタデータ) (2024-12-30T18:59:58Z) - FreeAvatar: Robust 3D Facial Animation Transfer by Learning an Expression Foundation Model [45.0201701977516]
ビデオ駆動の3D顔アニメーション転送は、アクターの表情を再現するためにアバターを駆動することを目的としている。
我々は,学習した表現のみに依存する,堅牢な顔アニメーショントランスファー手法であるFreeAvatarを提案する。
論文 参考訳(メタデータ) (2024-09-20T03:17:01Z) - GaussianHeads: End-to-End Learning of Drivable Gaussian Head Avatars from Coarse-to-fine Representations [54.94362657501809]
マルチビュー画像から高ダイナミックで変形可能な人間の頭部アバターをリアルタイムで生成する手法を提案する。
本手法のコアとなるのは,顔表情と頭部運動の複雑なダイナミクスを捉えることができる頭部モデルの階層的表現である。
我々は、この粗い顔アバターモデルを、エンドツーエンドのフレームワークで学習可能なパラメータとして頭部ポーズとともに訓練する。
論文 参考訳(メタデータ) (2024-09-18T13:05:43Z) - DICE: End-to-end Deformation Capture of Hand-Face Interactions from a Single Image [98.29284902879652]
DICEは1枚の画像から変形認識による手と顔のインタラクションを再現する最初のエンドツーエンド手法である。
ローカルな変形場とグローバルなメッシュ位置の回帰を2つのネットワークブランチに切り離すことが特徴である。
標準的なベンチマークと、精度と物理的妥当性の点から見れば、最先端のパフォーマンスを実現している。
論文 参考訳(メタデータ) (2024-06-26T00:08:29Z) - DGE: Direct Gaussian 3D Editing by Consistent Multi-view Editing [72.54566271694654]
オープンな言語命令に基づいて3Dオブジェクトやシーンを編集する際の問題点を考察する。
この問題に対する一般的なアプローチは、3D編集プロセスをガイドするために2Dイメージジェネレータまたはエディタを使用することである。
このプロセスは、コストのかかる3D表現の反復的な更新を必要とするため、しばしば非効率である。
論文 参考訳(メタデータ) (2024-04-29T17:59:30Z) - AvatarStudio: Text-driven Editing of 3D Dynamic Human Head Avatars [84.85009267371218]
本研究では,動的なフルヘッドアバターの外観を編集するテキストベースのAvatarStudioを提案する。
提案手法は,ニューラルフィールド(NeRF)を用いて人間の頭部のダイナミックなパフォーマンスを捉え,テキスト・ツー・イメージ拡散モデルを用いてこの表現を編集する。
提案手法は,全頭部を標準空間で編集し,事前学習した変形ネットワークを介して残時間ステップに伝達する。
論文 参考訳(メタデータ) (2023-06-01T11:06:01Z) - 3D GAN Inversion for Controllable Portrait Image Animation [45.55581298551192]
我々は新たに開発された3D GANを活用し、マルチビュー一貫性のある画像対象のポーズを明示的に制御できる。
ポートレート・イメージ・アニメーションの手法は、画像の品質、アイデンティティの保存、ポーズ・トランスファーの点で、従来の手法よりも優れていた。
論文 参考訳(メタデータ) (2022-03-25T04:06:06Z) - Cross-Domain and Disentangled Face Manipulation with 3D Guidance [33.43993665841577]
ヒト3DMMを用いて任意の領域の顔を操作する最初の方法を提案する。
これは、1) 3DMMパラメータから、事前訓練されたStyleGAN2の潜在空間埋め込みへの無絡マッピングである。
種々の顔領域における高品質な意味操作手法の優位性を示す実験と比較を行った。
論文 参考訳(メタデータ) (2021-04-22T17:59:50Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。