論文の概要: Nuvo: Neural UV Mapping for Unruly 3D Representations
- arxiv url: http://arxiv.org/abs/2312.05283v1
- Date: Mon, 11 Dec 2023 18:58:38 GMT
- ステータス: 処理完了
- システム内更新日: 2023-12-12 21:45:20.486759
- Title: Nuvo: Neural UV Mapping for Unruly 3D Representations
- Title(参考訳): nuvo: 無秩序な3d表現のためのニューラルuvマッピング
- Authors: Pratul P. Srinivasan and Stephan J. Garbin and Dor Verbin and Jonathan
T. Barron and Ben Mildenhall
- Abstract要約: 既存のUVマッピングアルゴリズムは、最先端の3D再構成と生成技術によって生成された幾何学で動作する。
本稿では,3次元再構成と生成技術により生成された幾何学的手法を用いたUVマッピング手法を提案する。
- 参考スコア(独自算出の注目度): 61.87715912587394
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Existing UV mapping algorithms are designed to operate on well-behaved
meshes, instead of the geometry representations produced by state-of-the-art 3D
reconstruction and generation techniques. As such, applying these methods to
the volume densities recovered by neural radiance fields and related techniques
(or meshes triangulated from such fields) results in texture atlases that are
too fragmented to be useful for tasks such as view synthesis or appearance
editing. We present a UV mapping method designed to operate on geometry
produced by 3D reconstruction and generation techniques. Instead of computing a
mapping defined on a mesh's vertices, our method Nuvo uses a neural field to
represent a continuous UV mapping, and optimizes it to be a valid and
well-behaved mapping for just the set of visible points, i.e. only points that
affect the scene's appearance. We show that our model is robust to the
challenges posed by ill-behaved geometry, and that it produces editable UV
mappings that can represent detailed appearance.
- Abstract(参考訳): 既存のUVマッピングアルゴリズムは、最先端の3D再構成と生成技術によって生成される幾何学的表現の代わりに、良好なメッシュで動作するように設計されている。
そのため、これらの手法をニューラル放射場と関連する技術(またはそのような分野から三角測量されたメッシュ)によって回収された体積密度に応用すると、視線合成や外観編集などのタスクに役立てるには、断片的すぎるテクスチャアトラスが生じる。
本稿では,3次元再構成と生成技術により生成した形状を操作可能なuvマッピング手法を提案する。
メッシュの頂点上で定義されたマッピングを計算する代わりに、我々の方法であるNuvoは、連続的なUVマッピングを表現するためにニューラルネットワークを使用し、シーンの外観に影響を及ぼす唯一の点である可視点のセットに対して、有効かつ良好なマッピングとして最適化する。
提案手法は,不用意な形状によって生じる課題に対して頑健であり,詳細な外観を表現できる編集可能なuvマッピングを生成できることを示す。
関連論文リスト
- Semantic UV mapping to improve texture inpainting for indoor scenes [0.0]
本研究の目的は, 走査された屋内メッシュの粗い除去後のテクスチャ塗布の改善である。
これは、室内のシーンのセマンティック情報を利用して、UVの島々と、壁や床のような異なる構造要素の3D表現をより正確に一致させる新しいUVマッピング前処理によって達成される。
論文 参考訳(メタデータ) (2024-07-12T13:21:25Z) - UVMap-ID: A Controllable and Personalized UV Map Generative Model [67.71022515856653]
制御可能でパーソナライズされたUVマップ生成モデルであるUVMap-IDを導入する。
従来の2次元の大規模学習法とは異なり,本研究では,事前学習したテキスト・画像拡散モデルの微調整を提案する。
定量的および定性的な解析は、制御可能でパーソナライズされたUVマップ生成における本手法の有効性を示す。
論文 参考訳(メタデータ) (2024-04-22T20:30:45Z) - UV Gaussians: Joint Learning of Mesh Deformation and Gaussian Textures for Human Avatar Modeling [71.87807614875497]
メッシュ変形と2次元UV空間のガウステクスチャを共同学習することで3次元人体をモデル化するUVガウスアンを提案する。
我々は,多視点画像,走査モデル,パラメトリックモデル登録,およびそれに対応するテクスチャマップを含む,人間の動作の新たなデータセットを収集し,処理する。
論文 参考訳(メタデータ) (2024-03-18T09:03:56Z) - Texture-GS: Disentangling the Geometry and Texture for 3D Gaussian Splatting Editing [79.10630153776759]
3Dガウススプラッティングは画期的なアプローチとして登場し、高忠実度再構成とリアルタイムレンダリングの能力に注目が集まっている。
そこで我々は,テクスチャ-GSという新しいアプローチを提案し,その外観を3次元表面上にマッピングされた2次元テクスチャとして表現することで幾何学から切り離す。
提案手法は,高精細な外観の編集を容易にするだけでなく,コンシューマレベルのデバイス上でのリアルタイムレンダリングも実現している。
論文 参考訳(メタデータ) (2024-03-15T06:42:55Z) - Delicate Textured Mesh Recovery from NeRF via Adaptive Surface
Refinement [78.48648360358193]
画像からテクスチャ化された表面メッシュを生成する新しいフレームワークを提案する。
我々のアプローチは、NeRFを用いて幾何学とビュー依存の外観を効率的に初期化することから始まります。
ジオメトリと共同で外観を洗練し、テクスチャ画像に変換してリアルタイムレンダリングします。
論文 参考訳(メタデータ) (2023-03-03T17:14:44Z) - FFHQ-UV: Normalized Facial UV-Texture Dataset for 3D Face Reconstruction [46.3392612457273]
このデータセットには、5万以上の高品質なテクスチャUVマップが含まれており、照度、中性表現、クリーンな顔領域がある。
我々のパイプラインは、StyleGANベースの顔画像編集アプローチの最近の進歩を活用している。
実験により,本手法は最先端手法よりも再現精度が向上することが示された。
論文 参考訳(メタデータ) (2022-11-25T03:21:05Z) - AUV-Net: Learning Aligned UV Maps for Texture Transfer and Synthesis [78.17671694498185]
AUV-Netは,3次元表面を2次元に整列したUV空間に埋め込むことを学習する。
結果として、テクスチャはオブジェクト間で整列し、画像の生成モデルによって容易に合成できる。
学習されたUVマッピングとアライメントテクスチャ表現は、テクスチャ転送、テクスチャ合成、テクスチャ化された単一ビュー3D再構成など、さまざまなアプリケーションを可能にする。
論文 参考訳(メタデータ) (2022-04-06T21:39:24Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。