論文の概要: Towards Privacy-preserving Photorealistic Self-avatars in Mixed Reality

• arxiv url: http://arxiv.org/abs/2507.22153v1
• Date: Tue, 29 Jul 2025 18:37:24 GMT
• ステータス: 翻訳完了
• システム内更新日: 2025-07-31 16:14:17.807608
• Title: Towards Privacy-preserving Photorealistic Self-avatars in Mixed Reality
• Title（参考訳）: 複合現実感におけるプライバシー保護型フォトリアリスティックセルフアバターの実現に向けて
• Authors: Ethan Wilson, Vincent Bindschaedler, Sophie Jörg, Sean Sheikholeslam, Kevin Butler, Eakta Jain,
• Abstract要約: フォトリアリスティックな3Dアバター生成は近年急速に改善されており、ユーザの本当の外観にマッチする現実的なアバターは、これまで以上にMR(Mixed Reality)において実現可能である。 しかし、オンラインでの類似性を共有するリスクは知られており、フォトリアリスティックなMRアバターはこれらのリスクを悪化させる可能性がある。 本研究では,より広範なソーシャルMRのための代替アバターレンダリング手法を提案する。顔の生体情報を保護するのに十分な差があると同時に,ユーザの人口統計的アイデンティティを保ちながら,現実的なアバターを合成する。
• 参考スコア（独自算出の注目度）: 8.591721920594441
• License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
• Abstract: Photorealistic 3D avatar generation has rapidly improved in recent years, and realistic avatars that match a user's true appearance are more feasible in Mixed Reality (MR) than ever before. Yet, there are known risks to sharing one's likeness online, and photorealistic MR avatars could exacerbate these risks. If user likenesses were to be shared broadly, there are risks for cyber abuse or targeted fraud based on user appearances. We propose an alternate avatar rendering scheme for broader social MR -- synthesizing realistic avatars that preserve a user's demographic identity while being distinct enough from the individual user to protect facial biometric information. We introduce a methodology for privatizing appearance by isolating identity within the feature space of identity-encoding generative models. We develop two algorithms that then obfuscate identity: \epsmethod{} provides differential privacy guarantees and \thetamethod{} provides fine-grained control for the level of identity offset. These methods are shown to successfully generate de-identified virtual avatars across multiple generative architectures in 2D and 3D. With these techniques, it is possible to protect user privacy while largely preserving attributes related to sense of self. Employing these techniques in public settings could enable the use of photorealistic avatars broadly in MR, maintaining high realism and immersion without privacy risk.
• Abstract（参考訳）: フォトリアリスティックな3Dアバター生成は近年急速に改善されており、ユーザの本当の外観にマッチする現実的なアバターは、これまで以上にMR(Mixed Reality)において実現可能である。 しかし、オンラインでの類似性を共有するリスクは知られており、フォトリアリスティックなMRアバターはこれらのリスクを悪化させる可能性がある。 ユーザーの好意が広く共有される場合、ユーザーの外見に基づくサイバー虐待やターゲット詐欺のリスクがある。 本研究では,より広範なソーシャルMRのための代替アバターレンダリング手法を提案する。顔の生体情報を保護するのに十分な差があると同時に,ユーザの人口動態を保存できる現実的なアバターを合成する。 識別符号化生成モデルの特徴空間内にアイデンティティを分離することにより、外観を民営化する手法を提案する。 そこで我々は,アイデンティティを隠蔽するアルゴリズムを2つ開発した。 \epsmethod{} は差分プライバシー保証を提供し, \thetamethod{} はアイデンティティオフセットのレベルを細かく制御する。 これらの手法は, 2次元および3次元の複数の生成アーキテクチャにおいて, 識別不能な仮想アバターの生成に成功した。 これらの技術により、ユーザプライバシを保護しつつ、自己感覚に関連する属性をほとんど保存することが可能となる。 これらの技術を公共の場で利用することで、MRで広く写真リアリスティックなアバターを使用することが可能になり、プライバシーのリスクなしに高いリアリズムと没入性を維持することができる。

関連論文リスト

• Is It Really You? Exploring Biometric Verification Scenarios in Photorealistic Talking-Head Avatar Videos [12.12643642515884]
  攻撃者はユーザーのアバターを盗み、外見や声を保ち、視覚や音だけでその使用を検知することはほぼ不可能である。 我々の主な疑問は、個人の顔の動きパターンが、アバターの視覚的外観が所有者のファクシミリであるときに、自分の身元を確認するための信頼性のある行動バイオメトリックスとして機能するかどうかである。 実験の結果,顔の動きのランドマークは,80%に近づいたAUC値による有意義な識別を可能にすることが示された。
  論文  参考訳（メタデータ） (2025-08-01T16:23:27Z)
• SmartAvatar: Text- and Image-Guided Human Avatar Generation with VLM AI Agents [91.26239311240873]
  SmartAvatarは視覚言語によるアニメーション対応の3Dアバターを生成するためのフレームワークである。 重要なイノベーションは、エージェントがドラフトアバターを描画する自動検証ループである。 生成されたアバターは完全にリグされ、一貫したアイデンティティと外観で操作をサポートする。
  論文  参考訳（メタデータ） (2025-06-05T03:49:01Z)
• GenCA: A Text-conditioned Generative Model for Realistic and Drivable Codec Avatars [44.8290935585746]
  フォトリアリスティックでコントロール可能な3Dアバターは、バーチャルリアリティー(VR/MR)、テレプレゼンス、ゲーム、映画制作など、様々な用途に欠かせない。 アバター作成の伝統的な方法は、しばしば各アバターのスキャンと再構築に時間を要する。 本稿では,多彩なアイデンティティを持つ写真リアルな顔アバターを生成可能なテキスト条件生成モデルを提案する。
  論文  参考訳（メタデータ） (2024-08-24T21:25:22Z)
• OPOM: Customized Invisible Cloak towards Face Privacy Protection [58.07786010689529]
  我々は、新しいタイプのカスタマイズクロークに基づく技術の観点から、顔のプライバシ保護について検討する。 本研究では,個人固有の(クラスワイドな)ユニバーサルマスクを生成するために,1人1マスク(OPOM)という新しい手法を提案する。 提案手法の有効性を,共通データセットと有名データセットの両方で評価した。
  論文  参考訳（メタデータ） (2022-05-24T11:29:37Z)
• Robust Egocentric Photo-realistic Facial Expression Transfer for Virtual Reality [68.18446501943585]
  ソーシャルな存在は、バーチャルリアリティー(VR)におけるデジタル人間による次世代コミュニケーションシステムを支える 最高の3DビデオリアルVRアバターは、人固有の(PS)モデルに依存します。 本稿では,エンドツーエンドのマルチアイデンティティアーキテクチャを提案することで,これらの制限を克服する。
  論文  参考訳（メタデータ） (2021-04-10T15:48:53Z)
• High-fidelity Face Tracking for AR/VR via Deep Lighting Adaptation [117.32310997522394]
  3Dビデオアバターは、圧縮、プライバシー、エンターテイメント、AR/VRにおける存在感を提供することで、仮想コミュニケーションを強化することができる。 既存の人物固有の3dモデルは照明に頑健ではないため、その結果は通常微妙な顔の振る舞いを見逃し、アバターにアーティファクトを引き起こす。 本論文では,高品質の3D顔追跡アルゴリズムを組み合わせたディープラーニング照明モデルを用いて,通常の映像から3Dフォトリアリズムアバターへの微妙かつ堅牢な顔の動き伝達手法を提案する。
  論文  参考訳（メタデータ） (2021-03-29T18:33:49Z)
• Differentially Private Imaging via Latent Space Manipulation [5.446368808660037]
  本稿では,無条件に訓練された生成モデルの潜在空間を操作することにより,画像の難読化に新たなアプローチを提案する。 これは、イメージプライバシに対する最初のアプローチで、$varepsilon$-differential privacy emphを満たす。
  論文  参考訳（メタデータ） (2021-03-08T17:32:08Z)
• IdentityDP: Differential Private Identification Protection for Face Images [17.33916392050051]
  顔の非識別、別名顔の匿名化は、実際のアイデンティティが隠されている間、同様の外観と同じ背景を持つ別の画像を生成することを指します。 我々は,データ駆動型ディープニューラルネットワークと差分プライバシー機構を組み合わせた顔匿名化フレームワークであるIdentityDPを提案する。 我々のモデルは、顔の識別関連情報を効果的に難読化し、視覚的類似性を保ち、高品質な画像を生成することができる。
  論文  参考訳（メタデータ） (2021-03-02T14:26:00Z)
• Towards Face Encryption by Generating Adversarial Identity Masks [53.82211571716117]
  敵の識別マスクを生成するためのターゲットID保護反復法(TIP-IM)を提案する。 TIP-IMは、様々な最先端の顔認識モデルに対して95%以上の保護成功率を提供する。
  論文  参考訳（メタデータ） (2020-03-15T12:45:10Z)

関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。

指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。