論文の概要: End-to-End Hybrid Refractive-Diffractive Lens Design with Differentiable Ray-Wave Model
- arxiv url: http://arxiv.org/abs/2406.00834v1
- Date: Sun, 2 Jun 2024 18:48:22 GMT
- ステータス: 処理完了
- システム内更新日: 2024-06-06 03:07:06.164700
- Title: End-to-End Hybrid Refractive-Diffractive Lens Design with Differentiable Ray-Wave Model
- Title(参考訳): 微分可能なレイウェーブモデルを用いたハイブリッド屈折回折レンズの設計
- Authors: Xinge Yang, Matheus Souza, Kunyi Wang, Praneeth Chakravarthula, Qiang Fu, Wolfgang Heidrich,
- Abstract要約: 本稿では,光収差と拡散位相変調の両方を正確にシミュレーションするためのハイブリッド光線トレーシングと波動伝搬(光波)モデルを提案する。
提案したレイウェーブモデルは完全に微分可能であり、屈折回折レンズ最適化と画像再構成ネットワークのエンドツーエンド共設計のための勾配バックプロパゲーションを可能にする。
- 参考スコア(独自算出の注目度): 18.183342315517244
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: Hybrid refractive-diffractive lenses combine the light efficiency of refractive lenses with the information encoding power of diffractive optical elements (DOE), showing great potential as the next generation of imaging systems. However, accurately simulating such hybrid designs is generally difficult, and in particular, there are no existing differentiable image formation models for hybrid lenses with sufficient accuracy. In this work, we propose a new hybrid ray-tracing and wave-propagation (ray-wave) model for accurate simulation of both optical aberrations and diffractive phase modulation, where the DOE is placed between the last refractive surface and the image sensor, i.e. away from the Fourier plane that is often used as a DOE position. The proposed ray-wave model is fully differentiable, enabling gradient back-propagation for end-to-end co-design of refractive-diffractive lens optimization and the image reconstruction network. We validate the accuracy of the proposed model by comparing the simulated point spread functions (PSFs) with theoretical results, as well as simulation experiments that show our model to be more accurate than solutions implemented in commercial software packages like Zemax. We demonstrate the effectiveness of the proposed model through real-world experiments and show significant improvements in both aberration correction and extended depth-of-field (EDoF) imaging. We believe the proposed model will motivate further investigation into a wide range of applications in computational imaging, computational photography, and advanced optical design. Code will be released upon publication.
- Abstract(参考訳): ハイブリッド屈折レンズは、屈折レンズの光効率と回折光学素子(DOE)の情報符号化能力を組み合わせることで、次世代のイメージングシステムとして大きな可能性を秘めている。
しかし、そのようなハイブリッドデザインを正確にシミュレートすることは一般的に困難であり、特に、十分な精度でハイブリッドレンズに対して、既存の微分可能な画像形成モデルが存在しない。
本研究では,光収差と回折位相変調の両方を正確にシミュレーションするハイブリッド光線トレーシングと波動伝搬(光波)モデルを提案する。このモデルでは,DOEを最終屈折面と画像センサの間に配置し,DOEの位置としてよく使用されるフーリエ面から遠ざける。
提案したレイウェーブモデルは完全に微分可能であり、屈折回折レンズ最適化と画像再構成ネットワークのエンドツーエンド共設計のための勾配バックプロパゲーションを可能にする。
提案手法の精度は,PSF(simulated point spread function)と理論的結果を比較して検証し,Zemaxのような商用ソフトウェアパッケージに実装されたソリューションよりも精度の高いモデルを示すシミュレーション実験を行った。
実世界の実験により提案モデルの有効性を実証し,収差補正と拡張深度画像(EDoF)の両面において有意な改善を示した。
提案モデルは、コンピュータ画像、計算写真、高度な光学設計における幅広い応用のさらなる研究の動機となると信じている。
コードは出版時に公開される。
関連論文リスト
- Quantum super-resolution microscopy by photon statistics and structured light [0.0]
本稿では,光子統計量測定に基づく量子超解像イメージング技術とその高精度なモデリングについて述べる。
我々の再構成アルゴリズムは任意の種類の非ポアソニアンエミッターに適応し、対応する古典的なSOFI法より優れる。
論文 参考訳(メタデータ) (2024-08-21T14:26:08Z) - Inverse design of photonic surfaces on Inconel via multi-fidelity machine learning ensemble framework and high throughput femtosecond laser processing [0.6125806862740051]
フォトニック表面の逆設計のためのMF(Multi-fidelity)機械学習アンサンブルフレームワークを実証する。
MFアンサンブルは、設計ソリューションを生成するための初期低忠実度モデルと、これらのソリューションを局所最適化によって洗練する高忠実度モデルを組み合わせる。
本手法は, エネルギー収穫への応用において, フォトニック表面の逆設計を推し進めるための強力なツールを提供する。
論文 参考訳(メタデータ) (2024-06-03T15:59:19Z) - Physics-Inspired Degradation Models for Hyperspectral Image Fusion [61.743696362028246]
ほとんどの融合法は、融合アルゴリズム自体にのみ焦点をあて、分解モデルを見落としている。
我々は、LR-HSIとHR-MSIの劣化をモデル化するための物理インスパイアされた劣化モデル(PIDM)を提案する。
提案したPIDMは,既存の核融合法における核融合性能を向上させることができる。
論文 参考訳(メタデータ) (2024-02-04T09:07:28Z) - Optical Aberration Correction in Postprocessing using Imaging Simulation [17.331939025195478]
モバイル写真の人気は増え続けている。
最近のカメラは、これらの修正作業の一部を光学設計から後処理システムに移行した。
光学収差による劣化を回復するための実用的手法を提案する。
論文 参考訳(メタデータ) (2023-05-10T03:20:39Z) - Neural Lens Modeling [50.57409162437732]
NeuroLens(ニューロレンス)は、点投影と光線鋳造に使用できる歪みと磁化のための神経レンズモデルである。
古典的なキャリブレーションターゲットを使用してプリキャプチャのキャリブレーションを行うことができ、後に3D再構成の際にキャリブレーションやリファインメントを行うために使用できる。
このモデルは、多くのレンズタイプにまたがって一般化されており、既存の3D再構成とレンダリングシステムとの統合は容易である。
論文 参考訳(メタデータ) (2023-04-10T20:09:17Z) - DIB-R++: Learning to Predict Lighting and Material with a Hybrid
Differentiable Renderer [78.91753256634453]
そこで本研究では,単体画像から固有物体特性を推定する難題について,微分可能量を用いて検討する。
そこで本研究では、スペクトル化とレイトレーシングを組み合わせることで、これらの効果をサポートするハイブリッド微分可能なDIBR++を提案する。
より高度な物理ベースの微分可能値と比較すると、DIBR++はコンパクトで表現力のあるモデルであるため、高い性能を持つ。
論文 参考訳(メタデータ) (2021-10-30T01:59:39Z) - Universal and Flexible Optical Aberration Correction Using Deep-Prior
Based Deconvolution [51.274657266928315]
そこで本研究では,収差画像とpsfマップを入力とし,レンズ固有深層プリエントを組み込んだ潜在高品質版を生成する,psf対応プラグイン・アンド・プレイ深層ネットワークを提案する。
具体的には、多彩なレンズの集合からベースモデルを事前訓練し、パラメータを迅速に精製して特定のレンズに適応させる。
論文 参考訳(メタデータ) (2021-04-07T12:00:38Z) - SIR: Self-supervised Image Rectification via Seeing the Same Scene from
Multiple Different Lenses [82.56853587380168]
本稿では、異なるレンズからの同一シーンの歪み画像の補正結果が同一であるべきという重要な知見に基づいて、新しい自己監督画像補正法を提案する。
我々は、歪みパラメータから修正画像を生成し、再歪み画像を生成するために、微分可能なワープモジュールを利用する。
本手法は,教師付きベースライン法や代表的最先端手法と同等あるいはそれ以上の性能を実現する。
論文 参考訳(メタデータ) (2020-11-30T08:23:25Z) - Single-shot Hyperspectral-Depth Imaging with Learned Diffractive Optics [72.9038524082252]
単発単眼単眼ハイパースペクトル(HS-D)イメージング法を提案する。
本手法では, 回折光学素子 (DOE) を用いる。
DOE の学習を容易にするため,ベンチトップ HS-D イメージラーを構築することで,最初の HS-D データセットを提案する。
論文 参考訳(メタデータ) (2020-09-01T14:19:35Z) - Optimization of collection optics for maximum fidelity in entangled
photon sources [0.0]
自発パラメトリックダウン変換現象によって生じる絡み合った光子のデコヒーレンス源について検討した。
結晶からの光子対の位相と空間的識別性は、到達可能な最大エンタングルメント忠実度を低下させる。
現実的なシナリオは数値的にモデル化され、非ゼロ放射角の光子対が位相差を収集する。
論文 参考訳(メタデータ) (2020-07-14T00:48:22Z) - Learning to Model and Calibrate Optics via a Differentiable Wave Optics
Simulator [27.913052825303097]
実蛍光顕微鏡の微分可能計算モデルを構築するための学習に基づく新しい手法を提案する。
我々のモデルは、データサンプルから直接実際の光学装置を校正し、所望の入出力データを指定することで、ポイントスプレッド機能を構築するために使用できる。
論文 参考訳(メタデータ) (2020-05-18T10:23:04Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。