論文の概要: A Differentiable Wave Optics Model for End-to-End Computational Imaging System Optimization
- arxiv url: http://arxiv.org/abs/2412.09774v1
- Date: Fri, 13 Dec 2024 00:57:47 GMT
- ステータス: 翻訳完了
- システム内更新日: 2024-12-16 15:03:00.567554
- Title: A Differentiable Wave Optics Model for End-to-End Computational Imaging System Optimization
- Title(参考訳): エンド・ツー・エンドの計算画像最適化のための微分波光学モデル
- Authors: Chi-Jui Ho, Yash Belhe, Steve Rotenberg, Ravi Ramamoorthi, Tzu-Mao Li, Nicholas Antipa,
- Abstract要約: エンドツーエンドの最適化は、計算画像システム設計のための強力なデータ駆動方式として登場した。
複合光学のエンドツーエンド最適化のために光輸送における収差と回折の両方をモデル化することは困難である。
複合光学の収差と回折の両方を効率的にモデル化する微分可能な光学シミュレータを提案する。
- 参考スコア(独自算出の注目度): 19.83939112821776
- License:
- Abstract: End-to-end optimization, which simultaneously optimizes optics and algorithms, has emerged as a powerful data-driven method for computational imaging system design. This method achieves joint optimization through backpropagation by incorporating differentiable optics simulators to generate measurements and algorithms to extract information from measurements. However, due to high computational costs, it is challenging to model both aberration and diffraction in light transport for end-to-end optimization of compound optics. Therefore, most existing methods compromise physical accuracy by neglecting wave optics effects or off-axis aberrations, which raises concerns about the robustness of the resulting designs. In this paper, we propose a differentiable optics simulator that efficiently models both aberration and diffraction for compound optics. Using the simulator, we conduct end-to-end optimization on scene reconstruction and classification. Experimental results demonstrate that both lenses and algorithms adopt different configurations depending on whether wave optics is modeled. We also show that systems optimized without wave optics suffer from performance degradation when wave optics effects are introduced during testing. These findings underscore the importance of accurate wave optics modeling in optimizing imaging systems for robust, high-performance applications.
- Abstract(参考訳): 光学とアルゴリズムを同時に最適化するエンドツーエンド最適化は、計算画像システム設計のための強力なデータ駆動手法として登場した。
本手法は、可変光シミュレータを組み込むことで、バックプロパゲーションによる共同最適化を実現し、測定から情報を取り出すための計測とアルゴリズムを生成する。
しかし、計算コストが高いため、複合光学のエンドツーエンド最適化のために光輸送における収差と回折の両方をモデル化することは困難である。
したがって、既存のほとんどの手法は波動光学効果やオフ軸収差を無視することで物理的精度を損なうため、結果として得られる設計の堅牢性に対する懸念が生じる。
本稿では,複合光学の収差と回折の両方を効率的にモデル化する微分可能な光学シミュレータを提案する。
シミュレーションを用いて、シーンの再構築と分類についてエンドツーエンドの最適化を行う。
実験結果から, レンズとアルゴリズムは, 波動光学がモデル化されているかによって, 異なる構成を採用することが明らかとなった。
また,波動光学を使わずに最適化されたシステムは,試験中に波動光学効果を導入すると性能劣化に悩まされることを示した。
これらの知見は、堅牢で高性能なイメージングシステムにおいて、正確な波動光学モデリングの重要性を浮き彫りにしている。
関連論文リスト
- Tolerance-Aware Deep Optics [15.445359232123133]
深層光学は、深層学習アルゴリズムで光学素子を共設計することで有望なアプローチとして現れてきた。
我々は、複数の許容型を深い光学設計パイプラインに組み込んだ、エンドツーエンドの許容-認識最適化フレームワークを初めて提示する。
本手法は, 物理インフォームドモデリングとデータ駆動型トレーニングを組み合わせることで, 製造・組立における構造偏差を考慮し補償することにより, 光設計を向上させる。
論文 参考訳(メタデータ) (2025-02-07T07:42:25Z) - Successive optimization of optics and post-processing with differentiable coherent PSF operator and field information [9.527960631238173]
我々は正確な光学シミュレーションモデルを導入し、パイプライン内の全ての操作は微分可能である。
様々な劣化に効率的に対処するために,フィールド情報を活用する共同最適化手法を設計する。
論文 参考訳(メタデータ) (2024-12-19T07:49:40Z) - End-to-End Hybrid Refractive-Diffractive Lens Design with Differentiable Ray-Wave Model [18.183342315517244]
本稿では,光収差と拡散位相変調の両方を正確にシミュレーションするためのハイブリッド光線トレーシングと波動伝搬(光波)モデルを提案する。
提案したレイウェーブモデルは完全に微分可能であり、屈折回折レンズ最適化と画像再構成ネットワークのエンドツーエンド共設計のための勾配バックプロパゲーションを可能にする。
論文 参考訳(メタデータ) (2024-06-02T18:48:22Z) - Spatial super-resolution in nanosensing with blinking emitters [79.16635054977068]
本稿では, 点滅型蛍光ナノセンサを用いたメロロジーにおける空間分解能向上手法を提案する。
我々は, 生活科学分野において, 画像解析技術に補完される点滅蛍光センシング剤を日常的に活用できると考えている。
論文 参考訳(メタデータ) (2024-02-27T10:38:05Z) - Revealing the preference for correcting separated aberrations in joint
optic-image design [19.852225245159598]
我々は、スマートフォンやドローンのような複雑なシステムの効率的な共同設計を実現するために、分離された収差を持つ光学を特徴付ける。
視野が大きいレンズの真の撮像手順を再現する画像シミュレーションシステムを提案する。
共同設計における分離収差補正の選好は, 縦色収差, 横色収差, 球状収差, フィールド曲率, コマの順である。
論文 参考訳(メタデータ) (2023-09-08T14:12:03Z) - Computational Optics for Mobile Terminals in Mass Production [17.413494778377565]
写真から測定した周波数特性とシステムパラメータの関係を説明するために,摂動型レンズシステムモデルを構築した。
このモデルに基づいて, 加工サンプルのSFRからプロキシカメラを構築するための最適化フレームワークを提案する。
プロキシカメラを用いて、光学収差とランダムな製造バイアスをエンコードしたデータペアを合成し、収差に基づくアルゴリズムを訓練する。
論文 参考訳(メタデータ) (2023-05-10T04:17:33Z) - Retrieving space-dependent polarization transformations via near-optimal
quantum process tomography [55.41644538483948]
トモグラフィー問題に対する遺伝的および機械学習アプローチの適用について検討する。
ニューラルネットワークベースのスキームは、リアルタイムにキャラクタリゼーションを必要とするアプリケーションにおいて、重要なスピードアップを提供する。
これらの結果は、より一般的な量子プロセスにおけるトモグラフィーアプローチの最適化の基礎となることを期待する。
論文 参考訳(メタデータ) (2022-10-27T11:37:14Z) - Generic Lithography Modeling with Dual-band Optics-Inspired Neural
Networks [52.200624127512874]
我々は、リソグラフィの基礎となる光学物理を考慮に入れたデュアルバンド光インスパイアされたニューラルネットワーク設計を導入する。
提案手法は, タイルサイズが1nm2/ピクセル解像度で最初に公表された金属/金属層輪郭シミュレーションである。
また,従来のリソグラフィーシミュレータよりも精度1%の精度で85倍の高速化を実現した。
論文 参考訳(メタデータ) (2022-03-12T08:08:50Z) - Differentiable Rendering with Perturbed Optimizers [85.66675707599782]
2Dイメージプロジェクションから3Dシーンを推論することは、コンピュータビジョンにおける中核的な問題の一つだ。
我々の研究は、よく知られた微分可能な定式化とランダムなスムーズなレンダリングの関連性を強調している。
提案手法を3次元シーン再構成に適用し,その利点を6次元ポーズ推定と3次元メッシュ再構成の課題に適用した。
論文 参考訳(メタデータ) (2021-10-18T08:56:23Z) - Universal and Flexible Optical Aberration Correction Using Deep-Prior
Based Deconvolution [51.274657266928315]
そこで本研究では,収差画像とpsfマップを入力とし,レンズ固有深層プリエントを組み込んだ潜在高品質版を生成する,psf対応プラグイン・アンド・プレイ深層ネットワークを提案する。
具体的には、多彩なレンズの集合からベースモデルを事前訓練し、パラメータを迅速に精製して特定のレンズに適応させる。
論文 参考訳(メタデータ) (2021-04-07T12:00:38Z) - Rapid characterisation of linear-optical networks via PhaseLift [51.03305009278831]
集積フォトニクスは優れた位相安定性を提供し、半導体産業によって提供される大規模な製造性に依存することができる。
このような光回路に基づく新しいデバイスは、機械学習アプリケーションにおいて高速でエネルギー効率の高い計算を約束する。
線形光ネットワークの転送行列を再構成する新しい手法を提案する。
論文 参考訳(メタデータ) (2020-10-01T16:04:22Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。