論文の概要: The Differentiable Lens: Compound Lens Search over Glass Surfaces and
Materials for Object Detection
- arxiv url: http://arxiv.org/abs/2212.04441v2
- Date: Mon, 27 Mar 2023 18:16:47 GMT
- ステータス: 処理完了
- システム内更新日: 2023-03-29 19:08:45.513922
- Title: The Differentiable Lens: Compound Lens Search over Glass Surfaces and
Materials for Object Detection
- Title(参考訳): 微分レンズ:ガラス表面上の複合レンズ探索と物体検出材料
- Authors: Geoffroi C\^ot\'e, Fahim Mannan, Simon Thibault, Jean-Fran\c{c}ois
Lalonde, Felix Heide
- Abstract要約: ほとんどのカメラレンズシステムは、下流のコンピュータ手法とは独立して設計されている。
本稿では,レンズ設計の課題に対処する最適化手法を提案する。
具体的には,ガラス材料のエンド・ツー・エンドコンテキストでの最適化を容易にするために,定量化ガラス変数を導入する。
- 参考スコア(独自算出の注目度): 42.00621716076439
- License: http://creativecommons.org/licenses/by-sa/4.0/
- Abstract: Most camera lens systems are designed in isolation, separately from
downstream computer vision methods. Recently, joint optimization approaches
that design lenses alongside other components of the image acquisition and
processing pipeline -- notably, downstream neural networks -- have achieved
improved imaging quality or better performance on vision tasks. However, these
existing methods optimize only a subset of lens parameters and cannot optimize
glass materials given their categorical nature. In this work, we develop a
differentiable spherical lens simulation model that accurately captures
geometrical aberrations. We propose an optimization strategy to address the
challenges of lens design -- notorious for non-convex loss function landscapes
and many manufacturing constraints -- that are exacerbated in joint
optimization tasks. Specifically, we introduce quantized continuous glass
variables to facilitate the optimization and selection of glass materials in an
end-to-end design context, and couple this with carefully designed constraints
to support manufacturability. In automotive object detection, we report
improved detection performance over existing designs even when simplifying
designs to two- or three-element lenses, despite significantly degrading the
image quality.
- Abstract(参考訳): ほとんどのカメラレンズシステムは、下流のコンピュータビジョンとは独立して設計されている。
近年、画像取得および処理パイプラインの他のコンポーネント(特に下流ニューラルネットワーク)と一緒にレンズを設計する共同最適化アプローチは、画像品質の改善やビジョンタスクのパフォーマンス向上を実現している。
しかし、これらの既存手法はレンズパラメータのサブセットのみを最適化し、分類学的性質からガラス材料を最適化することはできない。
本研究では,幾何収差を正確に捉えた球面レンズシミュレーションモデルを開発した。
我々は,共同最適化作業において悪化する非凸損失関数や多くの製造制約に対して悪名高いレンズ設計の課題に対処するための最適化戦略を提案する。
具体的には, エンド・ツー・エンドの設計コンテキストにおけるガラス材料の最適化と選択を容易にするために, 量子化連続ガラス変数を導入し, 製造性をサポートするために慎重に設計した制約と組み合わせる。
自動車用物体検出において, 画像品質が著しく低下したにもかかわらず, 2素子または3素子のレンズに設計を簡易化しても, 既存の設計よりも検出性能が向上したことを報告した。
関連論文リスト
- VICAN: Very Efficient Calibration Algorithm for Large Camera Networks [49.17165360280794]
ポースグラフ最適化手法を拡張する新しい手法を提案する。
我々は、カメラを含む二部グラフ、オブジェクトの動的進化、各ステップにおけるカメラオブジェクト間の相対変換について考察する。
我々のフレームワークは従来のPGOソルバとの互換性を維持しているが、その有効性はカスタマイズされた最適化方式の恩恵を受けている。
論文 参考訳(メタデータ) (2024-03-25T17:47:03Z) - Revealing the preference for correcting separated aberrations in joint
optic-image design [19.852225245159598]
我々は、スマートフォンやドローンのような複雑なシステムの効率的な共同設計を実現するために、分離された収差を持つ光学を特徴付ける。
視野が大きいレンズの真の撮像手順を再現する画像シミュレーションシステムを提案する。
共同設計における分離収差補正の選好は, 縦色収差, 横色収差, 球状収差, フィールド曲率, コマの順である。
論文 参考訳(メタデータ) (2023-09-08T14:12:03Z) - Computational Optics for Mobile Terminals in Mass Production [17.413494778377565]
写真から測定した周波数特性とシステムパラメータの関係を説明するために,摂動型レンズシステムモデルを構築した。
このモデルに基づいて, 加工サンプルのSFRからプロキシカメラを構築するための最適化フレームワークを提案する。
プロキシカメラを用いて、光学収差とランダムな製造バイアスをエンコードしたデータペアを合成し、収差に基づくアルゴリズムを訓練する。
論文 参考訳(メタデータ) (2023-05-10T04:17:33Z) - Neural Lens Modeling [50.57409162437732]
NeuroLens(ニューロレンス)は、点投影と光線鋳造に使用できる歪みと磁化のための神経レンズモデルである。
古典的なキャリブレーションターゲットを使用してプリキャプチャのキャリブレーションを行うことができ、後に3D再構成の際にキャリブレーションやリファインメントを行うために使用できる。
このモデルは、多くのレンズタイプにまたがって一般化されており、既存の3D再構成とレンダリングシステムとの統合は容易である。
論文 参考訳(メタデータ) (2023-04-10T20:09:17Z) - Taming Encoder for Zero Fine-tuning Image Customization with
Text-to-Image Diffusion Models [55.04969603431266]
本稿では,ユーザが指定したカスタマイズされたオブジェクトの画像を生成する手法を提案する。
この手法は、従来のアプローチで要求される長大な最適化をバイパスする一般的なフレームワークに基づいている。
提案手法は, 出力品質, 外観の多様性, 被写体忠実度を考慮した画像合成が可能であることを示す。
論文 参考訳(メタデータ) (2023-04-05T17:59:32Z) - Learning rich optical embeddings for privacy-preserving lensless image
classification [17.169529483306103]
我々は、光学系をエンコーダとしてキャストするユニークな多重化特性を利用して、カメラセンサーに直接学習した埋め込みを生成する。
画像分類の文脈では、エンコーダのパラメータと画像分類器のパラメータをエンドツーエンドで共同で最適化する。
我々の実験は、レンズレス光エンコーダとデジタル処理を共同で学習することで、センサーに低解像度の埋め込みが可能であることを示し、その結果、これらの測定から有意義な画像の復元がはるかに困難であることから、プライバシーが向上することを示している。
論文 参考訳(メタデータ) (2022-06-03T07:38:09Z) - Coded Illumination for Improved Lensless Imaging [22.992552346745523]
我々は,レンズレスカメラで再構成した画像の品質向上のために,符号化照明を用いることを提案する。
画像モデルでは、レンズレスカメラがセンサを計測する際、シーン/オブジェクトは複数の符号化照明パターンで照らされる。
本稿では,システムの分離性とブロック対角構造を利用した高速かつ低複雑さな回復アルゴリズムを提案する。
論文 参考訳(メタデータ) (2021-11-25T01:22:40Z) - Universal and Flexible Optical Aberration Correction Using Deep-Prior
Based Deconvolution [51.274657266928315]
そこで本研究では,収差画像とpsfマップを入力とし,レンズ固有深層プリエントを組み込んだ潜在高品質版を生成する,psf対応プラグイン・アンド・プレイ深層ネットワークを提案する。
具体的には、多彩なレンズの集合からベースモデルを事前訓練し、パラメータを迅速に精製して特定のレンズに適応させる。
論文 参考訳(メタデータ) (2021-04-07T12:00:38Z) - Optical Flow Estimation from a Single Motion-blurred Image [66.2061278123057]
画像内の動きのぼかしは、基本的なコンピュータビジョンの問題に実用的な関心を持つ可能性があります。
本研究では,単一動画像からの光流れをエンドツーエンドで推定する新しい枠組みを提案する。
論文 参考訳(メタデータ) (2021-03-04T12:45:18Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。