論文の概要: NeuMIP: Multi-Resolution Neural Materials
- arxiv url: http://arxiv.org/abs/2104.02789v1
- Date: Tue, 6 Apr 2021 21:22:22 GMT
- ステータス: 処理完了
- システム内更新日: 2021-04-08 12:33:32.023115
- Title: NeuMIP: Multi-Resolution Neural Materials
- Title(参考訳): neumip: マルチレゾリューション神経材料
- Authors: Alexandr Kuznetsov, Krishna Mullia, Zexiang Xu, Milo\v{s} Ha\v{s}an
and Ravi Ramamoorthi
- Abstract要約: NeuMIPは、さまざまなスケールでさまざまな材料外観を表現およびレンダリングするためのニューラルメソッドです。
従来のミップマップピラミッドを、完全に接続されたネットワークと組み合わせて、神経テクスチャのピラミッドに一般化する。
テッセルレーションを伴わずに複雑なパララックス効果を持つ材料をレンダリングできる新しい手法であるニューラルオフセットも導入する。
- 参考スコア(独自算出の注目度): 98.83749495351627
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We propose NeuMIP, a neural method for representing and rendering a variety
of material appearances at different scales. Classical prefiltering
(mipmapping) methods work well on simple material properties such as diffuse
color, but fail to generalize to normals, self-shadowing, fibers or more
complex microstructures and reflectances. In this work, we generalize
traditional mipmap pyramids to pyramids of neural textures, combined with a
fully connected network. We also introduce neural offsets, a novel method which
allows rendering materials with intricate parallax effects without any
tessellation. This generalizes classical parallax mapping, but is trained
without supervision by any explicit heightfield. Neural materials within our
system support a 7-dimensional query, including position, incoming and outgoing
direction, and the desired filter kernel size. The materials have small storage
(on the order of standard mipmapping except with more texture channels), and
can be integrated within common Monte-Carlo path tracing systems. We
demonstrate our method on a variety of materials, resulting in complex
appearance across levels of detail, with accurate parallax, self-shadowing, and
other effects.
- Abstract(参考訳): 我々は,様々な素材の外観を様々なスケールで表現・描画するニューラルネットワークNeuMIPを提案する。
古典的なプリフィルター (mipmapping) 法は拡散色のような単純な材料特性にうまく作用するが、正常、自己シャドーイング、繊維、より複雑な微細構造や反射率に一般化できない。
本研究では、従来のミップマップピラミッドを、完全に接続されたネットワークと組み合わせて、神経テクスチャのピラミッドに一般化する。
テッセルレーションを伴わずに複雑なパララックス効果を持つ材料をレンダリングできる新しい手法であるニューラルオフセットも導入する。
これは古典的パララックス写像を一般化するが、明示的なハイフィールドの監督なしで訓練される。
システム内の神経材料は,位置,入射方向,所望のフィルタカーネルサイズを含む7次元クエリをサポートする。
素材は(より多くのテクスチャチャンネルを除いて、標準的なmipmappingの順に)小さなストレージを持ち、一般的なモンテカルロ経路追跡システムに統合することができる。
本手法は様々な材料に応用し,細部にわたって複雑な外観を呈し,正確な視差,自己シャドーイング,その他の効果を示す。
関連論文リスト
- HR Human: Modeling Human Avatars with Triangular Mesh and High-Resolution Textures from Videos [52.23323966700072]
本研究では,モノクロ映像から高精細な物理材料テクスチャとメッシュを付加したアバターの取得のための枠組みを提案する。
本手法では,モノクロ映像からの情報を組み合わせて仮想多視点画像の合成を行う新しい情報融合方式を提案する。
実験により, 提案手法は, 高忠実度で従来の表現よりも優れており, この明示的な結果は共通三角形への展開をサポートすることが示された。
論文 参考訳(メタデータ) (2024-05-18T11:49:09Z) - A Hierarchical Architecture for Neural Materials [13.144139872006287]
我々は新しいレベルの精度を提供するニューラルな外観モデルを導入する。
インセプションベースのコアネットワーク構造は、複数のスケールで素材の外観をキャプチャする。
入力を周波数空間にエンコードし、勾配に基づく損失を導入し、学習フェーズの進行に適応させる。
論文 参考訳(メタデータ) (2023-07-19T17:00:45Z) - NeuManifold: Neural Watertight Manifold Reconstruction with Efficient
and High-Quality Rendering Support [45.68296352822415]
マルチビュー入力画像から高品質な水密多様体メッシュを生成する手法を提案する。
提案手法は両世界の利点を組み合わせ, ニューラルネットワークから得られる幾何学と, よりコンパクトな神経テクスチャ表現を最適化する。
論文 参考訳(メタデータ) (2023-05-26T17:59:21Z) - Neural Microfacet Fields for Inverse Rendering [54.15870869037466]
本研究では,シーンの画像から材料,幾何学,環境照明を復元する手法を提案する。
本手法では, 各試料を(潜在的に不透明な)表面として扱うことにより, ボリューム設定内にマイクロファセット反射率モデルを用いる。
論文 参考訳(メタデータ) (2023-03-31T05:38:13Z) - TMO: Textured Mesh Acquisition of Objects with a Mobile Device by using
Differentiable Rendering [54.35405028643051]
スマートフォン1台でテクスチャ化されたメッシュを野生で取得するパイプラインを新たに提案する。
提案手法ではまず,RGBD支援構造を動きから導入し,フィルタした深度マップを作成できる。
我々は,高品質なメッシュを実現するニューラル暗黙表面再構成法を採用する。
論文 参考訳(メタデータ) (2023-03-27T10:07:52Z) - PS-NeRF: Neural Inverse Rendering for Multi-view Photometric Stereo [22.42916940712357]
本稿では,暗黙表現に基づくMVPSのニューラルネットワーク逆レンダリング手法を提案する。
本手法は既存のMVPSやニューラルレンダリング法よりもはるかに正確な形状再構成を実現する。
論文 参考訳(メタデータ) (2022-07-23T03:55:18Z) - Extracting Triangular 3D Models, Materials, and Lighting From Images [59.33666140713829]
多視点画像観測による材料と照明の協調最適化手法を提案する。
従来のグラフィックスエンジンにデプロイ可能な,空間的に変化する材料と環境を備えたメッシュを活用します。
論文 参考訳(メタデータ) (2021-11-24T13:58:20Z) - Shape From Tracing: Towards Reconstructing 3D Object Geometry and SVBRDF
Material from Images via Differentiable Path Tracing [16.975014467319443]
識別可能なパストレースは、複雑な外観効果を再現できるため、魅力的なフレームワークである。
本稿では,初期粗いメッシュとメッシュファセット単位の材料表現を改良するために,微分可能なレイトレーシングを利用する方法を示す。
また、制約のない環境下での現実世界の物体の初期再構成を洗練させる方法についても示す。
論文 参考訳(メタデータ) (2020-12-06T18:55:35Z) - Pyramid Attention Networks for Image Restoration [124.34970277136061]
自己相似性(Self-similarity)とは、画像復元アルゴリズムで広く使われる画像を指す。
近年の深層畳み込みニューラルネットワークによる画像復元手法は, 自己相似性を十分に活用していない。
画像復元のための新しいピラミッドアテンションモジュールを提案し,マルチスケール特徴ピラミッドから長距離特徴対応をキャプチャする。
論文 参考訳(メタデータ) (2020-04-28T21:12:36Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。