論文の概要: Spec-NeRF: Multi-spectral Neural Radiance Fields
- arxiv url: http://arxiv.org/abs/2310.12987v1
- Date: Thu, 14 Sep 2023 16:17:55 GMT
- ステータス: 処理完了
- システム内更新日: 2024-01-15 16:42:56.777325
- Title: Spec-NeRF: Multi-spectral Neural Radiance Fields
- Title(参考訳): Spec-NeRF:マルチスペクトルニューラル放射場
- Authors: Jiabao Li, Yuqi Li, Ciliang Sun, Chong Wang, Jinhui Xiang
- Abstract要約: 異なるフィルタでフィルタされたカラー画像の集合から,マルチスペクトルレーダランス場とスペクトル感度関数(SSF)を共同で再構成する多スペクトルニューラルレイダランス場(Spec-NeRF)を提案する。
合成シナリオと実シナリオの両方を対象とした実験により, フィルタされたRGB画像と学習可能なNeRF, SSFを併用することで, 高い忠実度と有望なスペクトル再構成が達成できることを示した。
- 参考スコア(独自算出の注目度): 9.242830798112855
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We propose Multi-spectral Neural Radiance Fields(Spec-NeRF) for jointly
reconstructing a multispectral radiance field and spectral sensitivity
functions(SSFs) of the camera from a set of color images filtered by different
filters. The proposed method focuses on modeling the physical imaging process,
and applies the estimated SSFs and radiance field to synthesize novel views of
multispectral scenes. In this method, the data acquisition requires only a
low-cost trichromatic camera and several off-the-shelf color filters, making it
more practical than using specialized 3D scanning and spectral imaging
equipment. Our experiments on both synthetic and real scenario datasets
demonstrate that utilizing filtered RGB images with learnable NeRF and SSFs can
achieve high fidelity and promising spectral reconstruction while retaining the
inherent capability of NeRF to comprehend geometric structures. Code is
available at https://github.com/CPREgroup/SpecNeRF-v2.
- Abstract(参考訳): 異なるフィルタでフィルタされたカラー画像からカメラのマルチスペクトル放射場とスペクトル感度関数(ssfs)を共同で再構成するマルチスペクトルニューラル放射場(spec-nerf)を提案する。
提案手法は物理画像のモデリングに焦点をあて,推定したSSFと放射場を適用して,マルチスペクトルシーンの新たなビューを合成する。
この方法では、データ取得には低コストのトリクロマトリクスカメラといくつかのオフザシェルフカラーフィルタしか必要とせず、特殊な3Dスキャンやスペクトル撮像装置を使用するよりも実用的である。
解析可能なNeRFとSSFでフィルタしたRGB画像を利用することで、NeRFの固有能力を保ちながら、高い忠実度と有望なスペクトル再構成を実現できることを示す。
コードはhttps://github.com/cpregroup/specnerf-v2で入手できる。
関連論文リスト
- Hyperspectral Neural Radiance Fields [11.485829401765521]
ニューラルラジアンス場(NeRF)を用いたハイパースペクトル3次元再構成を提案する。
NeRFは、様々なカメラモデルによって捉えられたシーンの高品質なボリューム3D表現を作ることで広く成功している。
提案手法により,高速かつ高精度な3次元ハイパースペクトルシーンの創出が可能となった。
論文 参考訳(メタデータ) (2024-03-21T21:18:08Z) - SpectralNeRF: Physically Based Spectral Rendering with Neural Radiance
Field [70.15900280156262]
本稿では,新しいスペクトルの観点から,高品質な物理ベースレンダリングのためのエンドツーエンドニューラルラジアンスフィールド(NeRF)アーキテクチャを提案する。
スペクトルNeRFは、合成データセットと実データセットの新しいビューを合成する際に、最近のNeRFベースの方法よりも優れている。
論文 参考訳(メタデータ) (2023-12-14T07:19:31Z) - Multi-Space Neural Radiance Fields [74.46513422075438]
既存のニューラルレージアンス場(NeRF)法は反射物体の存在に悩まされている。
並列部分空間における特徴場の群を用いてシーンを表現するマルチスペースニューラルレイディアンス場(MS-NeRF)を提案する。
提案手法は,高品質シーンのレンダリングにおいて,既存の単一空間NeRF法よりも優れていた。
論文 参考訳(メタデータ) (2023-05-07T13:11:07Z) - Longwave infrared multispectral image sensor system using
aluminum-germanium plasmonic filter arrays [0.8081564951955755]
マルチスペクトルカメラは、電磁スペクトルの様々な波長で画像データを記録し、従来のカメラが捉えない追加情報を取得する。
アルミニウム基プラズマフィルタアレイをゲルマニウムで挟んだ光学素子を用いて3波長帯のLWIRマルチスペクトル画像センサを実験的に実験した。
本研究は,LWIR領域におけるターゲットシグネチャの検出と,他の高度なスペクトル分析のための多目的分光サーモグラフィ技術を示す。
論文 参考訳(メタデータ) (2023-03-03T01:47:32Z) - Cross-Spectral Neural Radiance Fields [49.28588927121722]
X-NeRFは、異なる光スペクトル感度のカメラから撮影した画像から、クロススペクトルのシーン表現を学習するための新しい手法である。
X-NeRFは正規化されたクロスデバイス座標(NXDC)を利用して、任意の視点から異なるモードの画像を描画する。
論文 参考訳(メタデータ) (2022-09-01T17:59:58Z) - NeRF-SR: High-Quality Neural Radiance Fields using Super-Sampling [82.99453001445478]
主に低分解能(LR)入力を用いた高分解能(HR)新規ビュー合成のソリューションであるNeRF-SRを提案する。
提案手法は,多層パーセプトロンを用いて各点密度と色を予測するニューラルレージアンス場(NeRF)上に構築されている。
論文 参考訳(メタデータ) (2021-12-03T07:33:47Z) - Tuning IR-cut Filter for Illumination-aware Spectral Reconstruction from
RGB [84.1657998542458]
再現精度は、使用中のRGBカメラのスペクトル応答に大きく依存していることが証明されている。
本稿では,既存のrgbカメラのフィルタアレイに基づくカラーイメージング機構を調査し,irカットフィルタの設計方法を提案する。
論文 参考訳(メタデータ) (2021-03-26T19:42:21Z) - NeRF++: Analyzing and Improving Neural Radiance Fields [117.73411181186088]
ニューラル・レージアンス・フィールド(NeRF)は、様々なキャプチャ設定のための印象的なビュー合成結果を達成する。
NeRFは、ビュー不変不透明度とビュー依存カラーボリュームを表す多層パーセプトロンを一連のトレーニング画像に適合させる。
大規模3次元シーンにおける物体の360度捕獲にNeRFを適用する際のパラメトリゼーション問題に対処する。
論文 参考訳(メタデータ) (2020-10-15T03:24:14Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。