論文の概要: Physically Plausible Spectral Reconstruction from RGB Images
- arxiv url: http://arxiv.org/abs/2001.00558v1
- Date: Thu, 2 Jan 2020 18:46:26 GMT
- ステータス: 処理完了
- システム内更新日: 2023-01-16 04:41:23.259013
- Title: Physically Plausible Spectral Reconstruction from RGB Images
- Title(参考訳): RGB画像からの可視光再構成
- Authors: Yi-Tun Lin, Graham D. Finlayson
- Abstract要約: 我々は,CNN学習をどのように拡張して,身体的妥当性を高めるかを示す。
提案手法は, 種々の露光条件下でのスペクトル回復性能を改良する。
- 参考スコア(独自算出の注目度): 13.46266335798719
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Recently Convolutional Neural Networks (CNN) have been used to reconstruct
hyperspectral information from RGB images. Moreover, this spectral
reconstruction problem (SR) can often be solved with good (low) error. However,
these methods are not physically plausible: that is when the recovered spectra
are reintegrated with the underlying camera sensitivities, the resulting
predicted RGB is not the same as the actual RGB, and sometimes this discrepancy
can be large. The problem is further compounded by exposure change. Indeed,
most learning-based SR models train for a fixed exposure setting and we show
that this can result in poor performance when exposure varies.
In this paper we show how CNN learning can be extended so that physical
plausibility is enforced and the problem resulting from changing exposures is
mitigated. Our SR solution improves the state-of-the-art spectral recovery
performance under varying exposure conditions while simultaneously ensuring
physical plausibility (the recovered spectra reintegrate to the input RGBs
exactly).
- Abstract(参考訳): 近年,畳み込みニューラルネットワーク(CNN)を用いて,RGB画像から高スペクトル情報を再構成している。
さらに、このスペクトル再構成問題(sr)はしばしば良い(低い)誤差で解くことができる。
しかし、これらの手法は物理的に妥当ではない:すなわち、回復したスペクトルが下層のカメラの感度と再統合されたとき、その結果の予測RGBは実際のRGBと同じではなく、時にはこの差が大きい。
この問題は露出変化によってさらに複雑になる。
実際、ほとんどの学習ベースSRモデルは、固定露光設定を訓練しており、露光が変化すると性能が低下することを示している。
本稿では,CNN学習をどのように拡張して,物理的妥当性を強制し,露出の変化に伴う問題を緩和するかを示す。
我々のSRソリューションは、物理可視性を同時に確保しつつ、様々な露光条件下での最先端のスペクトル回復性能を向上させる。
関連論文リスト
- Contourlet Refinement Gate Framework for Thermal Spectrum Distribution Regularized Infrared Image Super-Resolution [54.293362972473595]
画像超解像(SR)は、高解像度(HR)画像を低解像度(LR)画像から再構成することを目的としている。
SRタスクに対処する現在のアプローチは、RGB画像の特徴を抽出するか、同様の劣化パターンを仮定するものである。
スペクトル分布の忠実さを保ちつつ、赤外線変調特性を復元するコントゥーレット改質ゲートフレームワークを提案する。
論文 参考訳(メタデータ) (2024-11-19T14:24:03Z) - Deep learning-based hyperspectral image reconstruction for quality assessment of agro-product [0.0]
本研究の目的は,農業用深層学習によるRGB画像からのハイパースペクトル画像の再構成である。
アルゴリズムは、RGB画像からのハイパースペクトル画像を正確に再構成し、その結果のスペクトルは、地上構造と密接に一致した。
これらの知見は,様々な農業用ツールとして,ディープラーニングに基づくハイパースペクトル画像再構成の可能性を強調した。
論文 参考訳(メタデータ) (2024-05-20T18:15:20Z) - Rethinking RGB Color Representation for Image Restoration Models [55.81013540537963]
各画素に局所的な近傍構造情報を保持するために表現を拡大する。
画素あたりの損失に対する表現空間の置換は、画像復元モデルのトレーニングを容易にする。
私たちの空間は、色と局所構造の両方を再構築することで、全体的なメトリクスを一貫して改善します。
論文 参考訳(メタデータ) (2024-02-05T06:38:39Z) - Limitations of Data-Driven Spectral Reconstruction -- Optics-Aware Analysis and Mitigation [22.07699685165064]
コスト効率のよいRGBカメラで撮影したRGB画像からスペクトル情報を抽出することを目的とした,データ駆動型スペクトル再構成の最近の取り組み。
我々は、現在のデータセットとオーバーフィッティングに関する実用的制限と、RGB画像に符号化された情報の性質に関する基本的な制限の両方を評価する。
本稿では,メタデータデータ拡張と光学レンズ収差の組み合わせを利用して,RGB画像へのメタデータ情報の符号化を改善することを提案する。
論文 参考訳(メタデータ) (2024-01-08T11:46:45Z) - Symmetric Uncertainty-Aware Feature Transmission for Depth
Super-Resolution [52.582632746409665]
カラー誘導DSRのためのSymmetric Uncertainty-aware Feature Transmission (SUFT)を提案する。
本手法は最先端の手法と比較して優れた性能を実現する。
論文 参考訳(メタデータ) (2023-06-01T06:35:59Z) - Learning to Recover Spectral Reflectance from RGB Images [20.260831758913902]
RGB画像からのスペクトル反射率回復(SRR)は困難で費用がかかる。
既存のほとんどのアプローチは、合成画像に基づいて訓練され、見知らぬすべてのテスト画像に同じパラメータを使用する。
本稿では,訓練済みのネットワークパラメータを各テスト画像に微調整し,外部情報と内部情報を組み合わせた自己教師付きメタ補助学習(MAXL)戦略を提案する。
論文 参考訳(メタデータ) (2023-04-04T23:27:02Z) - Semantic-embedded Unsupervised Spectral Reconstruction from Single RGB
Images in the Wild [48.44194221801609]
この課題に対処するため、我々は、新しい軽量でエンドツーエンドの学習ベースのフレームワークを提案する。
我々は、効率的なカメラスペクトル応答関数推定により、検索されたHS画像から入力されたRGB画像と再投影されたRGB画像の差を徐々に広げる。
提案手法は最先端の教師なし手法よりも優れており,いくつかの設定下では最新の教師付き手法よりも優れている。
論文 参考訳(メタデータ) (2021-08-15T05:19:44Z) - Tuning IR-cut Filter for Illumination-aware Spectral Reconstruction from
RGB [84.1657998542458]
再現精度は、使用中のRGBカメラのスペクトル応答に大きく依存していることが証明されている。
本稿では,既存のrgbカメラのフィルタアレイに基づくカラーイメージング機構を調査し,irカットフィルタの設計方法を提案する。
論文 参考訳(メタデータ) (2021-03-26T19:42:21Z) - Frequency Consistent Adaptation for Real World Super Resolution [64.91914552787668]
実シーンにスーパーリゾリューション(SR)法を適用する際に周波数領域の整合性を保証する新しい周波数一貫性適応(FCA)を提案する。
監視されていない画像から劣化カーネルを推定し、対応するLow-Resolution (LR)画像を生成する。
ドメイン一貫性のあるLR-HRペアに基づいて、容易に実装可能な畳み込みニューラルネットワーク(CNN)SRモデルを訓練する。
論文 参考訳(メタデータ) (2020-12-18T08:25:39Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。