論文の概要: Pygmalion Effect in Vision: Image-to-Clay Translation for Reflective Geometry Reconstruction
- arxiv url: http://arxiv.org/abs/2511.21098v1
- Date: Wed, 26 Nov 2025 06:34:58 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-11-27 18:37:58.990659
- Title: Pygmalion Effect in Vision: Image-to-Clay Translation for Reflective Geometry Reconstruction
- Title(参考訳): 視覚におけるピグマリオン効果:反射幾何再構成のための画像からクレー変換
- Authors: Gayoung Lee, Junho Kim, Jin-Hwa Kim, Junmo Kim,
- Abstract要約: ピグマリオン・エフェクト・イン・ビジョン(Pygmalion Effect in Vision)は、画像から粘土への変換を通じて、反射物体を粘土のような形に"彫刻"する新しいフレームワークである。
ピグマリオンの神話に触発された本手法は,本質的な幾何学的整合性を維持しつつ,特異なキューを抑えることを学ぶ。
- 参考スコア(独自算出の注目度): 34.261318579652816
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Understanding reflection remains a long-standing challenge in 3D reconstruction due to the entanglement of appearance and geometry under view-dependent reflections. In this work, we present the Pygmalion Effect in Vision, a novel framework that metaphorically "sculpts" reflective objects into clay-like forms through image-to-clay translation. Inspired by the myth of Pygmalion, our method learns to suppress specular cues while preserving intrinsic geometric consistency, enabling robust reconstruction from multi-view images containing complex reflections. Specifically, we introduce a dual-branch network in which a BRDF-based reflective branch is complemented by a clay-guided branch that stabilizes geometry and refines surface normals. The two branches are trained jointly using the synthesized clay-like images, which provide a neutral, reflection-free supervision signal that complements the reflective views. Experiments on both synthetic and real datasets demonstrate substantial improvement in normal accuracy and mesh completeness over existing reflection-handling methods. Beyond technical gains, our framework reveals that seeing by unshining, translating radiance into neutrality, can serve as a powerful inductive bias for reflective object geometry learning.
- Abstract(参考訳): リフレクションの理解は、ビュー依存リフレクションの下での外観と幾何学の絡み合いによる3次元再構成における長年の課題である。
本研究では、画像から粘土への変換を通じて、反射物体を粘土のような形に「彫刻」する新しい枠組みであるPygmalion Effect in Visionを紹介する。
Pygmalion の神話に触発された本手法は,内在的な幾何学的整合性を保ちながら特異なキューを抑えることを学習し,複雑な反射を含む多視点画像からの堅牢な再構成を可能にする。
具体的には、BRDFをベースとした反射分枝を粘土誘導分枝で補完し、幾何を安定化し、表面の正規性を洗練するデュアルブランチネットワークを導入する。
2つの枝は、合成された粘土のような画像を使って共同で訓練され、反射ビューを補完する中立で反射のない監視信号を提供する。
合成データセットと実データセットの両方の実験は、既存のリフレクションハンドリング法よりも正常な精度とメッシュ完全性を大幅に改善したことを示している。
技術的利益以外にも、我々のフレームワークは、放射光を中立性に変換することで、反射的オブジェクト幾何学学習の強力な帰納的バイアスとなることを明らかにしている。
関連論文リスト
- MaterialRefGS: Reflective Gaussian Splatting with Multi-view Consistent Material Inference [83.38607296779423]
より物理的な環境モデルを用いた多視点一貫した物質推定がガウススプラッティングによる正確な反射の学習の鍵となることを示す。
本手法は照明と幾何学の両方を忠実に復元し,新しいビュー合成における最先端のレンダリング品質を実現する。
論文 参考訳(メタデータ) (2025-10-13T13:29:20Z) - Reflections Unlock: Geometry-Aware Reflection Disentanglement in 3D Gaussian Splatting for Photorealistic Scenes Rendering [51.223347330075576]
Ref-Unlockは3Dガウススプラッティングをベースとした新しい幾何認識反射モデリングフレームワークである。
提案手法では、高次球面高調波を用いた二重分岐表現を用いて、高周波反射の詳細を捉える。
そこで本手法は,反射シーンのリアルなレンダリングのための効率的で一般化可能なソリューションを提供する。
論文 参考訳(メタデータ) (2025-07-08T15:45:08Z) - NeRSP: Neural 3D Reconstruction for Reflective Objects with Sparse Polarized Images [62.752710734332894]
NeRSPはスパース偏光画像を用いた反射面のニューラル3次元再構成技術である。
偏光画像形成モデルと多視点方位整合性から測光的および幾何学的手がかりを導出する。
我々は6つのビューのみを入力として、最先端の表面再構成結果を達成する。
論文 参考訳(メタデータ) (2024-06-11T09:53:18Z) - SFDM: Robust Decomposition of Geometry and Reflectance for Realistic Face Rendering from Sparse-view Images [11.937182322353621]
スパースビュー画像から顔の特徴を分解・再構成する新しい2段階技術を提案する。
顔の特徴をRGB色から分離する試みとして, 形状, 拡散反射率, 分光反射率について検討した。
論文 参考訳(メタデータ) (2023-12-11T03:14:58Z) - DeepShaRM: Multi-View Shape and Reflectance Map Recovery Under Unknown
Lighting [35.18426818323455]
我々は,この課題に対して最先端の精度を実現する新しいマルチビュー手法であるDeepShaRMを導出する。
本稿では,カメラ・ビュー・リフレクタンス・マップを復元する新しいディープ・リフレクタンス・マップ推定ネットワークを提案する。
シェーディングネットワークは、符号付き距離関数で表される幾何推定を更新する。
論文 参考訳(メタデータ) (2023-10-26T17:50:10Z) - DANI-Net: Uncalibrated Photometric Stereo by Differentiable Shadow
Handling, Anisotropic Reflectance Modeling, and Neural Inverse Rendering [75.86523223933912]
非平衡測光ステレオ(UPS)は、未知の光によってもたらされる固有の曖昧さのために困難である。
異方性シャドーハンドリングと異方性リフレクタンスモデリングを備えた逆レンダリングフレームワークであるDANI-Netを提案する。
我々のネットワークは、2つの異なる経路を通る影と異方性反射の手がかりから恩恵を受ける。
論文 参考訳(メタデータ) (2023-03-27T11:10:54Z) - Monocular Reconstruction of Neural Face Reflectance Fields [0.0]
顔の反射場は、複雑な照明効果の原因となる反射特性を記述する。
モノクル画像から顔の反射率を推定する既存の手法は、特異成分を加えるアプローチはほとんどないが、顔は拡散していると仮定している。
顔反射に対する新しいニューラル表現法を提案し、単一の単眼画像から最終出現に寄与する反射の全ての成分を推定する。
論文 参考訳(メタデータ) (2020-08-24T08:19:05Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。