論文の概要: A Simple Framework for 3D Lensless Imaging with Programmable Masks
- arxiv url: http://arxiv.org/abs/2108.07966v1
- Date: Wed, 18 Aug 2021 04:05:33 GMT
- ステータス: 処理完了
- システム内更新日: 2021-08-19 14:31:13.667167
- Title: A Simple Framework for 3D Lensless Imaging with Programmable Masks
- Title(参考訳): プログラマブルマスクを用いた3次元レンズレスイメージングのための簡易フレームワーク
- Authors: Yucheng Zheng, Yi Hua, Aswin C. Sankaranarayanan, M. Salman Asif
- Abstract要約: 本稿では,プログラム可能なマスク上の異なるパターンを用いて,少数の計測値をキャプチャするレンズレスイメージングシステムを提案する。
まず,シーン内の一定数の深さ面上のテクスチャを復元する高速回復アルゴリズムを提案する。
第二に、プログラマブルレンズレスカメラにおけるマスク設計問題について検討し、マスクパターンを最適化するための設計テンプレートを提供する。
第3に、再構築後のアーティファクトを特定し、削除するための後処理のステップとして、精細化ネットワークを使用します。
- 参考スコア(独自算出の注目度): 37.35255907261072
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Lensless cameras provide a framework to build thin imaging systems by
replacing the lens in a conventional camera with an amplitude or phase mask
near the sensor. Existing methods for lensless imaging can recover the depth
and intensity of the scene, but they require solving computationally-expensive
inverse problems. Furthermore, existing methods struggle to recover dense
scenes with large depth variations. In this paper, we propose a lensless
imaging system that captures a small number of measurements using different
patterns on a programmable mask. In this context, we make three contributions.
First, we present a fast recovery algorithm to recover textures on a fixed
number of depth planes in the scene. Second, we consider the mask design
problem, for programmable lensless cameras, and provide a design template for
optimizing the mask patterns with the goal of improving depth estimation.
Third, we use a refinement network as a post-processing step to identify and
remove artifacts in the reconstruction. These modifications are evaluated
extensively with experimental results on a lensless camera prototype to
showcase the performance benefits of the optimized masks and recovery
algorithms over the state of the art.
- Abstract(参考訳): レンズレスカメラは、従来のカメラのレンズをセンサーの近くに振幅または位相マスクで置き換えることで、薄膜イメージングシステムを構築するための枠組みを提供する。
既存のレンズレスイメージングの方法はシーンの深さと強度を回復するが、計算量的に拡大する逆問題を解く必要がある。
さらに,既存手法では深度変化が大きい密集したシーンの復元に苦慮している。
本稿では,プログラム可能なマスク上の異なるパターンを用いて,少数の計測値をキャプチャするレンズレスイメージングシステムを提案する。
この文脈では、私たちは3つの貢献をします。
まず,シーン内の一定数の深さ面上のテクスチャを復元する高速回復アルゴリズムを提案する。
第二に、プログラマブルレンズレスカメラにおけるマスク設計問題について検討し、奥行き推定を改善することを目的としてマスクパターンを最適化するための設計テンプレートを提供する。
第3に,ポストプロセッシングのステップとしてリファインメントネットワークを使用し,再構築時のアーティファクトの識別と削除を行う。
これらの修正は、レンズレスカメラのプロトタイプの実験結果とともに広範囲に評価され、最適化されたマスクとリカバリアルゴリズムのパフォーマンスの利点を示す。
関連論文リスト
- GANESH: Generalizable NeRF for Lensless Imaging [12.985055542373791]
GANESHは,レンズレス画像からの高精細化と新鮮視合成を実現するための新しいフレームワークである。
シーン固有のトレーニングを必要とする既存の方法とは異なり、本手法は各シーンで再トレーニングすることなく、オンザフライ推論をサポートする。
この領域の研究を容易にするために、最初のマルチビューレンズレスデータセットであるLenslessScenesも提示する。
論文 参考訳(メタデータ) (2024-11-07T15:47:07Z) - MM-3DScene: 3D Scene Understanding by Customizing Masked Modeling with
Informative-Preserved Reconstruction and Self-Distilled Consistency [120.9499803967496]
本稿では,地域統計を探索し,代表的構造化点の発見と保存を行う新しい情報保存型再構築法を提案する。
本手法は, 地域形状のモデル化に集中し, マスク復元のあいまいさを軽減できる。
マスク付き領域における情報保存型再構築と未加工領域からの連続自己蒸留を組み合わせることにより,MM-3DSceneと呼ばれる統合フレームワークが提供される。
論文 参考訳(メタデータ) (2022-12-20T01:53:40Z) - Layered Depth Refinement with Mask Guidance [61.10654666344419]
汎用マスクを用いてSIDEモデルの深度予測を洗練させるマスク誘導深度改善の新しい問題を定式化する。
本フレームワークは,奥行きマップをマスクと逆マスクで表される2つの別々の層に分解し,層状改質・塗装・塗装を行う。
本手法は,内面境界領域と外面境界領域の深度を正確に補正し,異なる種類のマスクや初期深度予測に対して堅牢であることを示す。
論文 参考訳(メタデータ) (2022-06-07T06:42:44Z) - Coded Illumination for Improved Lensless Imaging [22.992552346745523]
我々は,レンズレスカメラで再構成した画像の品質向上のために,符号化照明を用いることを提案する。
画像モデルでは、レンズレスカメラがセンサを計測する際、シーン/オブジェクトは複数の符号化照明パターンで照らされる。
本稿では,システムの分離性とブロック対角構造を利用した高速かつ低複雑さな回復アルゴリズムを提案する。
論文 参考訳(メタデータ) (2021-11-25T01:22:40Z) - Towards Non-Line-of-Sight Photography [48.491977359971855]
非視線イメージング(NLOS)は、隠された物体からの多重バウンス間接反射を捉えることに基づいている。
アクティブなNLOSイメージングシステムは、シーンを通しての光の飛行時間の捕捉に依存している。
我々はNLOS写真と呼ばれる新しい問題定式化を提案し、この欠陥に特に対処する。
論文 参考訳(メタデータ) (2021-09-16T08:07:13Z) - CodedStereo: Learned Phase Masks for Large Depth-of-field Stereo [24.193656749401075]
従来のステレオは、画像量と信号対雑音比の基本的なトレードオフに悩まされている。
本稿では,この制限を克服する新たなエンドツーエンド学習手法を提案する。
シミュレーションで画像化できる体積の6倍の増加を示します。
論文 参考訳(メタデータ) (2021-04-09T23:44:52Z) - Universal and Flexible Optical Aberration Correction Using Deep-Prior
Based Deconvolution [51.274657266928315]
そこで本研究では,収差画像とpsfマップを入力とし,レンズ固有深層プリエントを組み込んだ潜在高品質版を生成する,psf対応プラグイン・アンド・プレイ深層ネットワークを提案する。
具体的には、多彩なレンズの集合からベースモデルを事前訓練し、パラメータを迅速に精製して特定のレンズに適応させる。
論文 参考訳(メタデータ) (2021-04-07T12:00:38Z) - FlatNet: Towards Photorealistic Scene Reconstruction from Lensless
Measurements [31.353395064815892]
レンズレス再構成における画像品質の大幅な向上を図った非定位深層学習に基づく再構成手法を提案する。
われわれのアプローチは、$textitFlatNet$と呼ばれ、マスクベースのレンズレスカメラから高品質のフォトリアリスティック画像を再構成するためのフレームワークを定めている。
論文 参考訳(メタデータ) (2020-10-29T09:20:22Z) - Deep 3D Capture: Geometry and Reflectance from Sparse Multi-View Images [59.906948203578544]
本稿では,任意の物体の高品質な形状と複雑な空間変化を持つBRDFを再構成する学習に基づく新しい手法を提案する。
まず、深層多視点ステレオネットワークを用いて、ビューごとの深度マップを推定する。
これらの深度マップは、異なるビューを粗く整列するために使用される。
本稿では,新しい多視点反射率推定ネットワークアーキテクチャを提案する。
論文 参考訳(メタデータ) (2020-03-27T21:28:54Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。