論文の概要: Eye Motion Matters for 3D Face Reconstruction
- arxiv url: http://arxiv.org/abs/2401.09677v1
- Date: Thu, 18 Jan 2024 01:47:55 GMT
- ステータス: 処理完了
- システム内更新日: 2024-01-19 18:11:44.899092
- Title: Eye Motion Matters for 3D Face Reconstruction
- Title(参考訳): 3次元顔再建における眼球運動の問題
- Authors: Xuan Wang, Mengyuan Liu
- Abstract要約: 視覚領域のダイナミックな特徴を捉えるために,局所的ダイナミックロスを補完するアイランドマーク調整モジュールを導入する。
我々のモジュールはランドマークのフレキシブルな調整を可能にし、様々な目の状態の正確な再現を可能にします。
- 参考スコア(独自算出の注目度): 13.633246294557765
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Recent advances in single-image 3D face reconstruction have shown remarkable
progress in various applications. Nevertheless, prevailing techniques tend to
prioritize the global facial contour and expression, often neglecting the
nuanced dynamics of the eye region. In response, we introduce an Eye Landmark
Adjustment Module, complemented by a Local Dynamic Loss, designed to capture
the dynamic features of the eyes area. Our module allows for flexible
adjustment of landmarks, resulting in accurate recreation of various eye
states. In this paper, we present a comprehensive evaluation of our approach,
conducting extensive experiments on two datasets. The results underscore the
superior performance of our approach, highlighting its significant
contributions in addressing this particular challenge.
- Abstract(参考訳): 近年の3次元顔画像再構成の進歩は,様々な応用において顕著な進歩を見せている。
それでも、一般的な技術は、グローバルな顔の輪郭と表情を優先し、しばしば眼領域の微妙なダイナミクスを無視する傾向にある。
そこで我々は,視覚領域のダイナミックな特徴を捉えるために,局所的ダイナミックロスを補完するアイランドマーク調整モジュールを提案する。
我々のモジュールはランドマークの柔軟な調整を可能にし、様々な目の状態の正確な再現を可能にします。
本稿では,このアプローチの包括的評価を行い,二つのデータセットについて広範な実験を行う。
結果は、我々のアプローチの優れたパフォーマンスを強調し、この特定の課題に取り組む上で、その重要な貢献を強調しています。
関連論文リスト
- Motion-aware 3D Gaussian Splatting for Efficient Dynamic Scene Reconstruction [89.53963284958037]
動的シーン再構築のための新しい動き認識拡張フレームワークを提案する。
具体的には,まず3次元ガウス運動と画素レベルの流れの対応性を確立する。
より厳密な最適化問題を示す先行的な変形に基づくパラダイムに対して,過渡対応変形補助モジュールを提案する。
論文 参考訳(メタデータ) (2024-03-18T03:46:26Z) - Single-shot Tomography of Discrete Dynamic Objects [1.1407697960152927]
ダイナミックトモグラフィーにおける高分解能時間像の再構成法を提案する。
本研究の意義は、断層撮影における動的過程の可視化と解析の改善にまで及んでいる。
論文 参考訳(メタデータ) (2023-11-09T10:52:02Z) - Accurate Eye Tracking from Dense 3D Surface Reconstructions using
Single-Shot Deflectometry [14.26583534657278]
単発位相計測-デフレクトメトリー(PMD)を用いた視線方向の高精度かつ高速な評価法を提案する。
本手法は,1枚のカメラフレーム(単一ショット)内でのみ,角膜および頭蓋骨の高密度な3次元表面情報を取得する。
論文 参考訳(メタデータ) (2023-08-14T17:36:39Z) - Neural Point-based Volumetric Avatar: Surface-guided Neural Points for
Efficient and Photorealistic Volumetric Head Avatar [62.87222308616711]
ニューラルポイント表現とニューラルボリュームレンダリングプロセスを採用したフルネーム(名前)を提案する。
具体的には、ニューラルポイントは高分解能UV変位マップを介してターゲット表現の表面を戦略的に拘束する。
設計上は,アバターをアニメーションする際の正確な表現制御を確保しつつ,地形的に変化する領域や細い構造を扱えるように設計されている。
論文 参考訳(メタデータ) (2023-07-11T03:40:10Z) - Decoupling Dynamic Monocular Videos for Dynamic View Synthesis [60.171882970835625]
動的モノクロビデオからの動的ビュー合成の課題を教師なしで解決する。
具体的には、動的物体の運動を物体の動きとカメラの動きに分離し、教師なし表面の整合性およびパッチベースのマルチビュー制約によって規則化する。
論文 参考訳(メタデータ) (2023-04-04T11:25:44Z) - 2D GANs Meet Unsupervised Single-view 3D Reconstruction [21.93671761497348]
事前訓練されたGANに基づく制御可能な画像生成は、幅広いコンピュータビジョンタスクに役立てることができる。
本稿では,GAN生成した多視点画像から2次元の監視を活用できる新しい画像条件のニューラル暗黙界を提案する。
提案手法の有効性は,ジェネリックオブジェクトのより優れた1次元3次元再構成結果によって示される。
論文 参考訳(メタデータ) (2022-07-20T20:24:07Z) - MonoSDF: Exploring Monocular Geometric Cues for Neural Implicit Surface
Reconstruction [72.05649682685197]
最先端のニューラル暗黙法は、多くの入力ビューから単純なシーンの高品質な再構築を可能にする。
これは主に、十分な制約を提供していないRGB再構築損失の固有の曖昧さによって引き起こされる。
近年の単分子形状予測の分野での進歩に触発され, ニューラルな暗黙的表面再構成の改善にこれらの方法が役立つかを探究する。
論文 参考訳(メタデータ) (2022-06-01T17:58:15Z) - Active 3D Shape Reconstruction from Vision and Touch [66.08432412497443]
人間は、視覚と触覚を共同で利用して、活発な物体探索を通じて世界の3D理解を構築する。
3次元形状の再構成では、最新の進歩はRGB画像、深度マップ、触覚読影などの限られた感覚データの静的データセットに依存している。
1)高空間分解能視覚に基づく触覚センサを応用した3次元物体のアクティブタッチに活用した触覚シミュレータ,2)触覚やビジュオクティビティルを先導するメッシュベースの3次元形状再構成モデル,3)触覚やビジュオのいずれかを用いたデータ駆動型ソリューションのセットからなるシステムを導入する。
論文 参考訳(メタデータ) (2021-07-20T15:56:52Z) - It's Written All Over Your Face: Full-Face Appearance-Based Gaze
Estimation [82.16380486281108]
顔の全体像のみを入力とする外観に基づく手法を提案する。
本手法は,特徴写像に空間重みを印加した畳み込みニューラルネットワークを用いて顔画像の符号化を行う。
本手法は2次元視線と3次元視線の両方で技量を有意に上回ることを示す。
論文 参考訳(メタデータ) (2016-11-27T15:00:10Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。