論文の概要: MUA: Mobile Ultra-detailed Animatable Avatars
- arxiv url: http://arxiv.org/abs/2604.18583v1
- Date: Mon, 20 Apr 2026 17:59:43 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-04-21 21:52:53.042919
- Title: MUA: Mobile Ultra-detailed Animatable Avatars
- Title(参考訳): MUA:モバイル用ウルトラディテールアニマタブルアバター
- Authors: Heming Zhu, Guoxing Sun, Marc Habermann,
- Abstract要約: 本稿では,ウェーブレット誘導型多層空間因子ブレンドサップスと呼ばれる新しいアニマタブルアバター表現を提案する。
提案手法は,従来の高品質教師アバターモデルよりも2000倍の計算コストと10倍のモデルサイズを実現する。
デスクトップPC上で180FPS以上を達成し,スタンドアロンのMeta Quest 3上で24FPSのネイティブなオンデバイスパフォーマンスを実現することで,没入型アプリケーションのための高忠実アバターの実現性を大幅に向上させる。
- 参考スコア(独自算出の注目度): 23.78711367231624
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Building photorealistic, animatable full-body digital humans remains a longstanding challenge in computer graphics and vision. Recent advances in animatable avatar modeling have largely progressed along two directions: improving the fidelity of dynamic geometry and appearance, or reducing computational complexity to enable deployment on resource-constrained platforms, e.g., VR headsets. However, existing approaches fail to achieve both goals simultaneously: Ultra-high-fidelity avatars typically require substantial computation on server-class GPUs, whereas lightweight avatars often suffer from limited surface dynamics, reduced appearance details, and noticeable artifacts. To bridge this gap, we propose a novel animatable avatar representation, termed Wavelet-guided Multi-level Spatial Factorized Blendshapes, and a corresponding distillation pipeline that transfers motion-aware clothing dynamics and fine-grained appearance details from a pre-trained ultra-high-quality avatar model into a compact, efficient representation. By coupling multi-level wavelet spectral decomposition with low-rank structural factorization in texture space, our method achieves up to 2000X lower computational cost and a 10X smaller model size than the original high-quality teacher avatar model, while preserving visually plausible dynamics and appearance details closely resemble those of the teacher model. Extensive comparisons with state-of-the-art methods show that our approach significantly outperforms existing avatar approaches designed for mobile settings and achieves comparable or superior rendering quality to most approaches that can only run on servers. Importantly, our representation substantially improves the practicality of high-fidelity avatars for immersive applications, achieving over 180 FPS on a desktop PC and real-time native on-device performance at 24 FPS on a standalone Meta Quest 3.
- Abstract(参考訳): フォトリアリスティックでアニマタブルなフルボディのデジタル人間を作ることは、コンピュータグラフィックスとビジョンにおける長年の課題である。
アニマタブル・アバター・モデリングの最近の進歩は、動的幾何学と外観の忠実さの向上、資源制約されたプラットフォーム(例えばVRヘッドセット)への展開を可能にする計算複雑性の低減という2つの方向に大きく進歩している。
超高忠実なアバターは通常、サーバクラスのGPUで相当な計算を必要とするが、軽量なアバターは、表面のダイナミクスの制限、外観の詳細の削減、顕著なアーティファクトに悩まされることが多い。
このギャップを埋めるために、ウェーブレット誘導型多層空間因子ブレンドサップスと呼ばれる新しいアニマタブルなアバター表現と、トレーニング済みの超高品質アバターモデルから運動認識型衣服のダイナミックスと細かな外観の詳細をコンパクトで効率的な表現に変換する蒸留パイプラインを提案する。
テクスチャ空間におけるマルチレベルウェーブレットスペクトル分解と低ランク構造因子分解を結合することにより,教師モデルによく似た視認性や外観を保ちつつ,2000倍の計算コストと10倍のモデルサイズを実現した。
最先端の手法と比較して、当社のアプローチは、モバイル設定用に設計された既存のアバターアプローチを著しく上回り、サーバ上でしか実行できないほとんどのアプローチに匹敵する、あるいは優れたレンダリング品質を実現している。
重要なことは,デスクトップPC上で180FPS,スタンドアロンのMeta Quest 3上で24FPSで実時間ネイティブなオンデバイスパフォーマンスを実現することにより,没入型アプリケーションにおける高忠実アバターの実用性を大幅に向上させることである。
関連論文リスト
- AGORA: Adversarial Generation Of Real-time Animatable 3D Gaussian Head Avatars [54.854597811704316]
AGORAは、3DGSを生成的敵ネットワーク内で拡張し、アニマタブルなアバターを生成する新しいフレームワークである。
表現の忠実度は、二重識別器の訓練スキームによって強制される。
AGORAは視覚的にリアルなだけでなく、正確に制御可能なアバターを生成する。
論文 参考訳(メタデータ) (2025-12-06T14:05:20Z) - Hyper Diffusion Avatars: Dynamic Human Avatar Generation using Network Weight Space Diffusion [45.88321772203678]
個人固有のレンダリングと拡散に基づく生成モデリングの長所を一体化する新しい手法を提案する。
まず、人間固有のUNETの集合を最適化し、各ネットワークは動的な人間のアバターを表す。
提案手法は,動的アバターのリアルタイムかつ制御可能なレンダリングのためのネットワーク重みを生成する。
論文 参考訳(メタデータ) (2025-09-04T12:15:55Z) - EVA: Expressive Virtual Avatars from Multi-view Videos [51.33851869426057]
本稿では,アクター固有の,完全に制御可能な,表現力のある人間のアバターフレームワークであるExpressive Virtual Avatars (EVA)を紹介する。
EVAは、表情、身体の動き、手の動きの独立的な制御を可能にしながら、高忠実でライフライクなレンダリングをリアルタイムで実現している。
この研究は、完全に乾燥可能なデジタル人間モデルに向けた大きな進歩を示している。
論文 参考訳(メタデータ) (2025-05-21T11:22:52Z) - TeGA: Texture Space Gaussian Avatars for High-Resolution Dynamic Head Modeling [52.87836237427514]
フォトリアルアバターは、テレプレゼンス、拡張現実、エンターテイメントにおける新興アプリケーションにおいて重要な要素であると見なされている。
本稿では,最先端の3Dヘッドアバターモデルを提案する。
論文 参考訳(メタデータ) (2025-05-08T22:10:27Z) - SEGA: Drivable 3D Gaussian Head Avatar from a Single Image [15.117619290414064]
本稿では,3次元ドライビング可能なガウスヘッドアバターの新規な手法であるSEGAを提案する。
SEGAは、大規模な2Dデータセットから派生した先行データと、マルチビュー、マルチ圧縮、マルチIDデータから得られた3D先行データとをシームレスに結合する。
提案手法は, 一般化能力, アイデンティティ保存, 表現リアリズムにおいて, 最先端の手法よりも優れていることを示す。
論文 参考訳(メタデータ) (2025-04-19T18:23:31Z) - Drivable Volumetric Avatars using Texel-Aligned Features [52.89305658071045]
光テレプレゼンスは、動的に合成された外観を実現するために、高忠実度ボディモデリングと忠実な運転の両方を必要とする。
本稿では,現実人のフルボディアバターをモデリングし,駆動する際の2つの課題に対処するエンドツーエンドフレームワークを提案する。
論文 参考訳(メタデータ) (2022-07-20T09:28:16Z) - Pixel Codec Avatars [99.36561532588831]
Pixel Codec Avatars(PiCA)は、3D人間の顔の深い生成モデルです。
oculus quest 2のモバイルvrヘッドセットでは、同じシーンで5つのアバターがリアルタイムでレンダリングされる。
論文 参考訳(メタデータ) (2021-04-09T23:17:36Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。