論文の概要: Seeing like a Cephalopod: Colour Vision with a Monochrome Event Camera
- arxiv url: http://arxiv.org/abs/2504.10984v1
- Date: Tue, 15 Apr 2025 08:47:11 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-04-16 22:09:54.472913
- Title: Seeing like a Cephalopod: Colour Vision with a Monochrome Event Camera
- Title(参考訳): セファロポッドのように見える:モノクロームのイベントカメラによるカラービジョン
- Authors: Sami Arja, Nimrod Kruger, Alexandre Marcireau, Nicholas Owen Ralph, Saeed Afshar, Gregory Cohen,
- Abstract要約: セファロポッドは1種類の光受容体を持つにもかかわらず、独特の色の識別能力を示す。
我々は、この生物学的メカニズムから着想を得て、ボールレンズとイベントベースのカメラを組み合わせたスペクトルイメージングシステムを設計する。
- 参考スコア(独自算出の注目度): 37.881496223977706
- License:
- Abstract: Cephalopods exhibit unique colour discrimination capabilities despite having one type of photoreceptor, relying instead on chromatic aberration induced by their ocular optics and pupil shapes to perceive spectral information. We took inspiration from this biological mechanism to design a spectral imaging system that combines a ball lens with an event-based camera. Our approach relies on a motorised system that shifts the focal position, mirroring the adaptive lens motion in cephalopods. This approach has enabled us to achieve wavelength-dependent focusing across the visible light and near-infrared spectrum, making the event a spectral sensor. We characterise chromatic aberration effects, using both event-based and conventional frame-based sensors, validating the effectiveness of bio-inspired spectral discrimination both in simulation and in a real setup as well as assessing the spectral discrimination performance. Our proposed approach provides a robust spectral sensing capability without conventional colour filters or computational demosaicing. This approach opens new pathways toward new spectral sensing systems inspired by nature's evolutionary solutions. Code and analysis are available at: https://samiarja.github.io/neuromorphic_octopus_eye/
- Abstract(参考訳): セファロポッドは1種類の光受容体を持つにもかかわらず、独自の色識別能力を示し、代わりに、分光情報を知覚するために、眼球と瞳孔の形状によって誘導される色収差に依存する。
私たちはこの生物学的メカニズムから着想を得て、ボールレンズとイベントベースのカメラを組み合わせたスペクトルイメージングシステムを設計しました。
我々のアプローチは、頭足類における適応的なレンズの動きを反映して焦点位置をシフトする運動系に依存している。
このアプローチにより、可視光と近赤外スペクトルの波長依存性の焦点を達成でき、スペクトルセンサとなる。
イベントベースおよび従来のフレームベースセンサーの両方を用いて,色収差効果を特徴付けるとともに,シミュレーションおよび実環境において,生体由来のスペクトル識別の有効性を検証し,スペクトル識別性能を評価する。
提案手法は,従来のカラーフィルタや計算復調を使わずに,頑健なスペクトルセンシング機能を提供する。
このアプローチは、自然の進化的解に触発された新しいスペクトルセンシングシステムへの新たな経路を開く。
コードと分析は、https://samiarja.github.io/neuromorphic_octopus_eye/で利用可能である。
関連論文リスト
- Snapshot multi-spectral imaging through defocusing and a Fourier imager network [13.068631760956265]
標準モノクロームイメージセンサを用いたスナップショットマルチスペクトルイメージング手法を提案する。
このディープラーニングを利用したフレームワークは、モノクロ画像センサを用いたスナップショット画像取得による高品質なマルチスペクトル画像再構成を実現する。
論文 参考訳(メタデータ) (2025-01-24T07:04:27Z) - Paleoinspired Vision: From Exploring Colour Vision Evolution to Inspiring Camera Design [44.353407126161514]
網膜に新しいオプシン層を導入し,視覚伝達モデルを提案する。
我々は、特定のオプシンによって形成されたカラー画像のマシンビジョン認識精度を測定することにより、進化的圧力を定量化する。
我々はオプシンのスペクトル感度を再構築するための進化的保存最適化アルゴリズムを開発した。
論文 参考訳(メタデータ) (2024-12-27T04:07:52Z) - Spatial super-resolution in nanosensing with blinking emitters [79.16635054977068]
本稿では, 点滅型蛍光ナノセンサを用いたメロロジーにおける空間分解能向上手法を提案する。
我々は, 生活科学分野において, 画像解析技術に補完される点滅蛍光センシング剤を日常的に活用できると考えている。
論文 参考訳(メタデータ) (2024-02-27T10:38:05Z) - Color Recognition in Challenging Lighting Environments: CNN Approach [0.0]
研究者は、コンピュータビジョンの応用のための色検出技術を強化するために取り組んでいる。
この問題に対処するために,畳み込みニューラルネットワーク(CNN)に基づく色検出手法を提案する。
本手法は照明条件の異なる色検出の堅牢性を大幅に向上させることができることを実験的に検証した。
論文 参考訳(メタデータ) (2024-02-07T11:26:00Z) - Multispectral Stereo-Image Fusion for 3D Hyperspectral Scene
Reconstruction [4.2056926734482065]
本稿では,異なるスペクトル範囲をカバーする2つの校正マルチスペクトルリアルタイム能動スナップショットカメラをステレオシステムに組み合わせた新しいアプローチを提案する。
異なるマルチスペクトルスナップショットカメラの併用により、3次元再構成とスペクトル解析の両方が可能となる。
論文 参考訳(メタデータ) (2023-12-15T13:20:35Z) - Curved Diffusion: A Generative Model With Optical Geometry Control [56.24220665691974]
最終シーンの外観に対する異なる光学系の影響は、しばしば見過ごされる。
本研究では,画像レンダリングに使用される特定のレンズとテキスト画像拡散モデルを密接に統合するフレームワークを提案する。
論文 参考訳(メタデータ) (2023-11-29T13:06:48Z) - Inverse-Designed Meta-Optics with Spectral-Spatial Engineered Response
to Mimic Color Perception [0.1773006951689229]
逆設計法は、光を同時に集中させ、フィルターを使わずに焦点光のスペクトルを形作る、単層メタ光学のセットを作成するために用いられる。
その結果,CIE 1931 XYZ色空間の色整合関数を模したスペクトルが得られた。
論文 参考訳(メタデータ) (2022-04-28T14:12:54Z) - Single-shot Hyperspectral-Depth Imaging with Learned Diffractive Optics [72.9038524082252]
単発単眼単眼ハイパースペクトル(HS-D)イメージング法を提案する。
本手法では, 回折光学素子 (DOE) を用いる。
DOE の学習を容易にするため,ベンチトップ HS-D イメージラーを構築することで,最初の HS-D データセットを提案する。
論文 参考訳(メタデータ) (2020-09-01T14:19:35Z) - Cross-Spectral Periocular Recognition with Conditional Adversarial
Networks [59.17685450892182]
本研究では,近赤外・近赤外スペクトル間の近赤外画像の変換を訓練した条件付き生成逆相関ネットワークを提案する。
EER=1%, GAR>99% @ FAR=1%, ポリUデータベースの最先端技術に匹敵するスペクトル近視性能を得た。
論文 参考訳(メタデータ) (2020-08-26T15:02:04Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。