論文の概要: Bio-inspired Polarization Event Camera
- arxiv url: http://arxiv.org/abs/2112.01933v1
- Date: Thu, 2 Dec 2021 11:38:02 GMT
- ステータス: 処理完了
- システム内更新日: 2021-12-07 08:20:51.625530
- Title: Bio-inspired Polarization Event Camera
- Title(参考訳): バイオインスパイアされた偏光イベントカメラ
- Authors: Germain Haessig, Damien Joubert, Justin Haque, Yingkai Chen, Moritz
Milde, Tobi Delbruck, and Viktor Gruev
- Abstract要約: トマトポッド(マンティスエビ)視覚システムは近年,パラダイムシフト偏光とマルチスペクトルイメージングセンサの設計のための青写真を提供している。
本稿では,Nyquistの最大フレームレートを超える電力とサンプルデータを節約するために,持続的かつ過渡的な生物学的視覚経路を模倣する新しいストマトポッド型偏光カメラを提案する。
このバイオインスパイアされたセンサは、同期強度フレームと非同期偏光輝度変化情報の両方を100万倍の照明範囲で同時にキャプチャする。
- 参考スコア(独自算出の注目度): 0.0
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: The stomatopod (mantis shrimp) visual system has recently provided a
blueprint for the design of paradigm-shifting polarization and multispectral
imaging sensors, enabling solutions to challenging medical and remote sensing
problems. However, these bioinspired sensors lack the high dynamic range (HDR)
and asynchronous polarization vision capabilities of the stomatopod visual
system, limiting temporal resolution to \~12 ms and dynamic range to \~ 72 dB.
Here we present a novel stomatopod-inspired polarization camera which mimics
the sustained and transient biological visual pathways to save power and sample
data beyond the maximum Nyquist frame rate. This bio-inspired sensor
simultaneously captures both synchronous intensity frames and asynchronous
polarization brightness change information with sub-millisecond latencies over
a million-fold range of illumination. Our PDAVIS camera is comprised of 346x260
pixels, organized in 2-by-2 macropixels, which filter the incoming light with
four linear polarization filters offset by 45 degrees. Polarization information
is reconstructed using both low cost and latency event-based algorithms and
more accurate but slower deep neural networks. Our sensor is used to image HDR
polarization scenes which vary at high speeds and to observe dynamical
properties of single collagen fibers in bovine tendon under rapid cyclical
loads
- Abstract(参考訳): stomatopod (mantis shrimp) 視覚システムは、最近、パラダイムシフト偏光とマルチスペクトルイメージングセンサーの設計のための青写真を提供し、医療やリモートセンシングの問題への解決策を提供する。
しかし、これらのバイオインスパイアされたセンサーは、高ダイナミックレンジ(hdr)と、ストマトプス視覚システムの非同期偏光視覚能力が欠如しており、時間分解能を12ms、ダイナミックレンジを72dbに制限している。
本稿では,Nyquistの最大フレームレートを超える電力とサンプルデータを節約するために,持続的かつ過渡的な生物学的視覚経路を模倣する新しいストマトポッド型偏光カメラを提案する。
このバイオインスパイアされたセンサは、同期強度フレームと非同期偏光輝度変化情報の両方を100万倍の照明範囲で同時にキャプチャする。
PDAVISカメラは346×260ピクセルで構成され、2-by-2マクロピクセルで構成されており、4つの線形偏光フィルタを45度オフセットして入射光をフィルタリングする。
分極情報は、低コストと遅延イベントベースのアルゴリズムと、より正確だが遅いディープニューラルネットワークを使用して再構成される。
我々のセンサは高速で変化するHDR偏光シーンを撮像し、高速周期負荷下でウシ腱における単一コラーゲン繊維の動的特性を観察するために用いられる。
関連論文リスト
- Event-based Asynchronous HDR Imaging by Temporal Incident Light Modulation [54.64335350932855]
我々は,HDRイメージングの課題に関する重要な知見に基づいて,Pixel-Asynchronous HDRイメージングシステムを提案する。
提案システムでは,DVS(Dynamic Vision Sensors)とLCDパネルを統合する。
LCDパネルは、その透過性を変化させてDVSの照射インシデントを変調し、ピクセル非依存のイベントストリームをトリガーする。
論文 参考訳(メタデータ) (2024-03-14T13:45:09Z) - Passive Snapshot Coded Aperture Dual-Pixel RGB-D Imaging [25.851398356458425]
単発3Dセンシングは、顕微鏡、医用画像、手術ナビゲーション、自律運転など、多くの応用分野において有用である。
画像レンズに符号化開口とDPセンサを併用したCADS(Coded Aperture Dual-Pixel Sensing)を提案する。
以上の結果から,ALF(All-in-focus)推定では1.5dBPSNRが改善し,DPセンシングでは5-6%の深さ推定精度が得られた。
論文 参考訳(メタデータ) (2024-02-28T06:45:47Z) - Multi-Modal Neural Radiance Field for Monocular Dense SLAM with a
Light-Weight ToF Sensor [58.305341034419136]
単眼カメラと軽量ToFセンサを備えた初の高密度SLAMシステムを提案する。
本稿では,RGBカメラと軽量ToFセンサの両方の信号のレンダリングをサポートするマルチモーダル暗黙のシーン表現を提案する。
実験により,本システムは軽量なToFセンサの信号をうまく利用し,競合的な結果が得られることが示された。
論文 参考訳(メタデータ) (2023-08-28T07:56:13Z) - Polarimetric Imaging for Perception [3.093890460224435]
我々は、RGB偏光カメラを用いた知覚タスクの改善の可能性を分析する。
我々は、最先端のディープニューラルネットワークを用いて、両者にとって定量化された改善が達成可能であることを示す。
論文 参考訳(メタデータ) (2023-05-24T06:42:27Z) - Object Motion Sensitivity: A Bio-inspired Solution to the Ego-motion
Problem for Event-based Cameras [0.0]
我々は、CMOSイメージセンサ(IRIS)における第2世代のニューロモルフィック画像センサ、統合網膜機能について強調する。
IRISは、光受容体から網膜の出力への完全な網膜計算を模倣し、特徴抽出を目的とする。
この結果から,OMSは従来のRGBやDVSと同様の効率で標準的なコンピュータビジョンタスクを実現できるが,帯域幅の大幅な削減が期待できることがわかった。
論文 参考訳(メタデータ) (2023-03-24T16:22:06Z) - Bringing Rolling Shutter Images Alive with Dual Reversed Distortion [75.78003680510193]
ローリングシャッター(RS)歪みは、時間とともにインスタントグローバルシャッター(GS)フレームから一列のピクセルを選択した結果であると解釈することができる。
我々は、RS時間における速度場の反復学習を通して、デュアル光流列を生成するための新しいエンド・ツー・エンドモデルIFEDを開発した。
論文 参考訳(メタデータ) (2022-03-12T14:57:49Z) - ESL: Event-based Structured Light [62.77144631509817]
イベントカメラはバイオインスパイアされたセンサーであり、標準的なカメラよりも大きな利点がある。
本稿では,イベントカメラを用いた新しい構造化光システムを提案し,高精度かつ高速な深度センシングの課題に対処する。
論文 参考訳(メタデータ) (2021-11-30T15:47:39Z) - TUM-VIE: The TUM Stereo Visual-Inertial Event Dataset [50.8779574716494]
イベントカメラはバイオインスパイアされた視覚センサーで、ピクセルごとの明るさの変化を測定する。
これらは、低レイテンシ、高ダイナミックレンジ、高時間分解能、低消費電力など、従来のフレームベースのカメラよりも多くの利点を提供する。
イベントカメラを用いた3次元認識・ナビゲーションアルゴリズムの開発を促進するため,TUM-VIEデータセットを提案する。
論文 参考訳(メタデータ) (2021-08-16T19:53:56Z) - Deep Snapshot HDR Reconstruction Based on the Polarization Camera [3.534261120716916]
オンチップマイクロポーラライザ技術により、4つの空間整列および時間同期偏光画像を取得できるようになりました。
本研究では,偏光画像中の画素の露光時間と光の偏光度と偏光角度の関係について検討した。
偏光画像を用いてHDR画像を復元するディープスナップショットHDR再構築フレームワークを提案する。
論文 参考訳(メタデータ) (2021-05-12T17:35:10Z) - Time-Multiplexed Coded Aperture Imaging: Learned Coded Aperture and
Pixel Exposures for Compressive Imaging Systems [56.154190098338965]
提案した時間多重符号化開口(TMCA)をエンドツーエンドで最適化できることを示した。
tmcaは圧縮光野イメージングとハイパースペクトルイメージングの2つの異なる応用において、より良いコード化されたスナップショットを誘導する。
この凝固法は、最先端の圧縮画像システムよりも4dB以上性能が高い。
論文 参考訳(メタデータ) (2021-04-06T22:42:34Z) - Passive Inter-Photon Imaging [18.739224941453983]
デジタルカメラの画素は入射光エネルギーをアナログ電流に変換し、それを固定幅のバイナリ表現に変換することで画像強度を測定する。
この直接測定方法は、極端照明下でのダイナミックレンジの制限と性能の低下に苦しむ。
本稿では、連続光子検出の時間遅延として定義される光子間タイミングの測定に基づく新しい強度手がかりを提案する。
論文 参考訳(メタデータ) (2021-03-31T18:44:52Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。