論文の概要: Luce: Relightable Gaussians for 3D Asset Generation
- arxiv url: http://arxiv.org/abs/2608.23943v1
- Date: Tue, 25 Aug 2026 01:03:55 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-08-26 14:09:34.723397
- Title: Luce: Relightable Gaussians for 3D Asset Generation
- Title(参考訳): ルース:3Dアセット・ジェネレーションのガウシアン
- Authors: Mayank Singh, Michele Stoppa, Alvise Memo, Rui Yu, Harsha Kalli, Srimanth Gunturi, Muhammad Ahmed Riaz, Behrooz Shahsavari, Waleed Abdulla, David E. Jacobs,
- Abstract要約: 高忠実な画像から3D生成には、幾何学と外観の両方をキャプチャする3D表現が必要である。
本稿では,Voxelized multimodal Gaussian cloud 内で幾何学とPBRを統一した3次元表現である Luce を提案する。
Toys4Kでは、ルースは最先端の単一画像から3D生成を実現し、最強のベースラインよりもFIDを28%改善した。
- 参考スコア(独自算出の注目度): 4.296019358250277
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: High-fidelity image-to-3D generation requires a 3D representation that captures both geometry and appearance. To support relighting and integration into standard rendering pipelines, the representation should include physically based rendering (PBR) modalities such as albedo, metallic-roughness, and surface normals. We propose Luce, a 3D representation that unifies geometry and PBR materials within a voxelized multimodal Gaussian cloud, using dedicated Gaussian primitives for each modality. A variational autoencoder compresses this representation into a unified material-aware latent space. A rectified-flow transformer generates this latent from a single image, conditioned on multi-layer features from a pretrained image encoder that preserve both semantic context and fine spatial detail. The latent then decodes into relightable PBR Gaussians and an optional textured mesh with a tangent-space normal map. On Toys4K, Luce achieves state-of-the-art single-image-to-3D generation, improving FID by 28% over the strongest baseline. We further introduce a benchmark of AI-generated images, on which Luce improves the CLIP image-alignment score over the best baseline (0.8519 vs. 0.8299). Luce generates relightable, geometrically accurate, and materially faithful assets that preserve fine details such as text, logos, and inscriptions.
- Abstract(参考訳): 高忠実な画像から3D生成には、幾何学と外観の両方をキャプチャする3D表現が必要である。
標準的なレンダリングパイプラインへのリライティングと統合をサポートするために、この表現には、アルベド、金属フラーネス、表面正規化などの物理ベースのレンダリング(PBR)モダリティを含めるべきである。
ボクセル化マルチモーダルガウス雲における幾何とPBRを統一する3次元表現であるルースを,各モーダルに対して専用ガウス原始体を用いて提案する。
変分オートエンコーダは、この表現を統一された物質対応ラテント空間に圧縮する。
整流流変換器は、この潜水剤を単一の画像から生成し、多層特徴に条件付け、予め訓練された画像エンコーダから生成し、意味的コンテキストと空間的詳細の両方を保存する。
その後、潜在子は可照性のあるPBRガウスと、接空間正規写像を持つ任意のテクスチャ付きメッシュに復号する。
Toys4Kでは、ルースは最先端の単一画像から3D生成を実現し、最強のベースラインよりもFIDを28%改善した。
さらに、AI生成画像のベンチマークを導入し、Luceは最高のベースライン(0.8519 vs. 0.8299)でCLIP画像アライメントスコアを改善した。
ルースは、テキスト、ロゴ、碑文などの細部を詳細に保存する、面白く、幾何学的に正確で、物質的に忠実な資産を生成する。
関連論文リスト
- LightHarmony3D: Harmonizing Illumination and Shadows for Object Insertion in 3D Gaussian Splatting [90.15229815175593]
光ハーモニー3D(LightHarmony3D)について述べる。
繰り返し最適化の代わりに生成前処理を活用することにより,本手法はシーン照明を効率よく捉えることができる。
3DGSでメッシュ挿入のための最初の専用ベンチマークを導入し、照明の一貫性と光リアリズムを評価するための標準化された評価フレームワークを提供する。
論文 参考訳(メタデータ) (2026-03-31T03:26:30Z) - Large Material Gaussian Model for Relightable 3D Generation [54.10879517395551]
物理ベースレンダリング(PBR)素材を用いた高品質な3Dコンテンツ作成のための新しいフレームワークを提案する。
また,本手法は,ベースライン法に比べて視覚的魅力が向上するだけでなく,材料モデリングも向上し,下流レンダリングの実用化を可能にした。
論文 参考訳(メタデータ) (2025-09-26T09:35:12Z) - PS-GS: Gaussian Splatting for Multi-View Photometric Stereo [8.560379885301705]
多視点光度ステレオ(MVPS)による逆レンダリングは、固定環境照明に依存する逆レンダリングアプローチよりも正確な3次元再構成をもたらす。
多様な指向性光(マルチライト)で照らされた物体の形状, 材料, 照明を効率よく, 共同で推定する多視点測光ステレオ(PS-GS)のガウス散乱について紹介する。
合成データと実データの両方を用いた実験により, 再現精度と計算効率の点で, 従来の手法よりも優れていたことを示す。
論文 参考訳(メタデータ) (2025-07-24T09:22:02Z) - Complex-Valued Holographic Radiance Fields [9.050557698554696]
複雑な値のガウス原始体を用いて3次元ガウススプラッティングを再構成し、光波によるレンダリングのサポートを拡大する。
本手法は最先端の手法と比較して,画像品質を維持しつつ,30x-10,000倍の高速化を実現している。
論文 参考訳(メタデータ) (2025-06-10T02:09:04Z) - SVG-IR: Spatially-Varying Gaussian Splatting for Inverse Rendering [23.104424058660744]
3D Gaussian Splatting(3DGS)は、新規ビュー合成(NVS)タスクの印象的な機能を示した。
我々は,NVSとライティング品質の両面を向上することを目的とした,Spatially-vayring Gaussian Inverse Rendering (SVG-IR) と呼ばれる新しいフレームワークを提案する。
提案したSVG-IRフレームワークは、レンダリング品質を著しく向上し、ピーク信号対雑音比(PSNR)において2.5dB、リライトタスクにおいて3.5dBの既存のガウス的手法よりも2.5dB向上する。
論文 参考訳(メタデータ) (2025-04-09T12:11:58Z) - BEAM: Bridging Physically-based Rendering and Gaussian Modeling for Relightable Volumetric Video [58.97416204208624]
BEAMは、4Dガウス表現を物理ベースレンダリング(PBR)でブリッジし、高品質でライティング可能なビデオを生成する新しいパイプラインである。
BEAMは、様々な照明条件下で現実的な人生のような可視化を提供することで、インタラクティブなエンターテイメント、ストーリーテリング、クリエイティブな可視化の新しい可能性を開く。
論文 参考訳(メタデータ) (2025-02-12T10:58:09Z) - TexGaussian: Generating High-quality PBR Material via Octree-based 3D Gaussian Splatting [48.97819552366636]
本稿では, 八面体配向型3次元ガウス平板を用いた高速PBR材料生成のためのTexGaussianを提案する。
本手法は,PBR素材をより視覚的に合成し,非条件シナリオとテキスト条件シナリオの両方において,従来の方法よりも高速に動作させる。
論文 参考訳(メタデータ) (2024-11-29T12:19:39Z) - GIR: 3D Gaussian Inverse Rendering for Relightable Scene Factorization [62.13932669494098]
本稿では,3次元ガウス表現を用いた3次元ガウス逆レンダリング(GIR)手法を提案する。
最短固有ベクトルを用いて各3次元ガウスの正規性を計算する。
我々は3次元ガウシアン毎に方向対応の放射光を格納し、多重バウンス光輸送を近似するために二次照明をアンタングルするために、効率的なボクセルベースの間接照明追跡方式を採用する。
論文 参考訳(メタデータ) (2023-12-08T16:05:15Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。