論文の概要: High-Speed Full-Color HDR Imaging via Unwrapping Modulo-Encoded Spike Streams
- arxiv url: http://arxiv.org/abs/2604.14632v1
- Date: Thu, 16 Apr 2026 05:20:38 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-04-17 21:29:31.738111
- Title: High-Speed Full-Color HDR Imaging via Unwrapping Modulo-Encoded Spike Streams
- Title(参考訳): モジュロ符号化スパイクストリームによる高速フルカラーHDRイメージング
- Authors: Chu Zhou, Siqi Yang, Kailong Zhang, Heng Guo, Zhaofei Yu, Boxin Shi, Imari Sato,
- Abstract要約: 高速フルカラーHDR取得が可能な全変調HDRイメージングシステムを提案する。
このアプローチの核心は、複数の測定を時間内にインターリーブできる、露出分離型モジュロイメージングの定式化である。
本システムの実現可能性を検証するため,モジュール符号化スパイクストリームに基づく概念実証ハードウェアの実装を実証した。
- 参考スコア(独自算出の注目度): 83.83721273785281
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Conventional RGB-based high dynamic range (HDR) imaging faces a fundamental trade-off between motion artifacts in multi-exposure captures and irreversible information loss in single-shot techniques. Modulo sensors offer a promising alternative by encoding theoretically unbounded dynamic range into wrapped measurements. However, existing modulo solutions remain bottlenecked by iterative unwrapping overhead and hardware constraints limiting them to low-speed, grayscale capture. In this work, we present a complete modulo-based HDR imaging system that enables high-speed, full-color HDR acquisition by synergistically advancing both the sensing formulation and the unwrapping algorithm. At the core of our approach is an exposure-decoupled formulation of modulo imaging that allows multiple measurements to be interleaved in time, preserving a clean, observation-wise measurement model. Building upon this, we introduce an iteration-free unwrapping algorithm that integrates diffusion-based generative priors with the physical least absolute remainder property of modulo images, supporting highly efficient, physics-consistent HDR reconstruction. Finally, to validate the practical viability of our system, we demonstrate a proof-of-concept hardware implementation based on modulo-encoded spike streams. This setup preserves the native high temporal resolution of spike cameras, achieving 1000 FPS full-color imaging while reducing output data bandwidth from approximately 20 Gbps to 6 Gbps. Extensive evaluations indicate that our coordinated approach successfully overcomes key systemic bottlenecks, demonstrating the feasibility of deploying modulo imaging in dynamic scenarios.
- Abstract(参考訳): 従来のRGBベースのハイダイナミックレンジ(HDR)イメージングは、マルチ露光キャプチャーにおけるモーションアーティファクトとシングルショット技術における不可逆的な情報損失の基本的なトレードオフに直面している。
モデュロセンサーは理論的に非有界なダイナミックレンジを包み込み測定に符号化することで、有望な代替手段を提供する。
しかし、既存のModuloソリューションは、反復的なアンラッピングオーバーヘッドと、ハードウェアの制約により、低速でグレースケールなキャプチャに制限されたままである。
本研究では,センサの定式化とアンラッピングアルゴリズムの両方を相乗的に進めることで,高速かつフルカラーのHDR取得を可能にする全変調HDRイメージングシステムを提案する。
当社のアプローチの核心は、複数の測定を時間内にインターリーブし、クリーンで観察的な測定モデルを維持するための、露光分解されたモジュロイメージングの定式化である。
そこで本研究では,拡散に基づく生成先行をモジュロ画像の物理的最小絶対残差特性と統合し,高効率で物理に一貫性のあるHDR再構成を支援する,反復フリーなアンラッピングアルゴリズムを提案する。
最後に,本システムの実用性を検証するために,モジュロ符号化スパイクストリームに基づく概念実証ハードウェアの実装を示す。
この設定は、スパイクカメラのネイティブ高時間分解能を保ち、出力データの帯域幅を約20Gbpsから6Gbpsに減らしながら1000FPSのフルカラーイメージングを実現する。
本手法は, 動的シナリオにおけるモジュロイメージングの実現可能性を示すとともに, 重要なボトルネックを克服する上で有効であることを示す。
関連論文リスト
- Wavelet-Domain Masked Image Modeling for Color-Consistent HDR Video Reconstruction [69.35623794013152]
高ダイナミックレンジ(LDR)ビデオ再構成は、LDRビデオから微妙な明るさ、色、詳細を復元することを目的としている。
既存の方法は、しばしば色の不正確さと時間的不整合に悩まされる。
We propose WMNet, a novel HDR video reconstruction network that leverageing Wavelet domain Masked Image Modeling。
論文 参考訳(メタデータ) (2026-02-07T06:19:23Z) - Deep Lightweight Unrolled Network for High Dynamic Range Modulo Imaging [19.49437461280304]
Modulo-Imaging (MI)は、強度レベルに達すると信号強度をリセットすることでダイナミックなダイナミックレンジ画像を拡張するための有望な代替手段を提供する。
自己調整を容易にするScaling Equi項を導入し、モデルが元の分布外の新しい画像に適応できるようにする。
論文 参考訳(メタデータ) (2026-01-18T18:22:38Z) - Autoregressive High-Order Finite Difference Modulo Imaging: High-Dynamic Range for Computer Vision Applications [3.4956406636452626]
高ダイナミックレンジ(グレッシブ)イメージングは、自律運転などのコンピュータビジョンタスクに不可欠な、シーン内のすべての光のトーンを捉えるのに不可欠である。
標準の商用撮像システムは、井戸深度と量子化精度の限界に直面し、HDR能力を妨げている。
我々は、飽和時に信号のリセットを行うモジュロアナログ-デジタルアプローチを開発し、隣接する画素強度を通してピクセルリセットを推定する。
論文 参考訳(メタデータ) (2025-04-05T16:41:15Z) - Generating Content for HDR Deghosting from Frequency View [56.103761824603644]
近年の拡散モデル (DM) はHDRイメージング分野に導入されている。
DMは画像全体を推定するために大きなモデルで広範囲の反復を必要とする。
ゴーストフリーHDRイメージングのための低周波数対応拡散(LF-Diff)モデルを提案する。
論文 参考訳(メタデータ) (2024-04-01T01:32:11Z) - Event-based Asynchronous HDR Imaging by Temporal Incident Light Modulation [54.64335350932855]
我々は,HDRイメージングの課題に関する重要な知見に基づいて,Pixel-Asynchronous HDRイメージングシステムを提案する。
提案システムでは,DVS(Dynamic Vision Sensors)とLCDパネルを統合する。
LCDパネルは、その透過性を変化させてDVSの照射インシデントを変調し、ピクセル非依存のイベントストリームをトリガーする。
論文 参考訳(メタデータ) (2024-03-14T13:45:09Z) - LAN-HDR: Luminance-based Alignment Network for High Dynamic Range Video
Reconstruction [20.911738532410766]
本稿では,LDRフレームを特徴空間に整列させ,その特徴をHDRフレームにマージする,エンドツーエンドのHDRビデオ合成フレームワークを提案する。
トレーニングでは、フレーム再構築損失に加えて時間的損失を採用し、時間的一貫性を高め、フリッカリングを低減する。
論文 参考訳(メタデータ) (2023-08-22T01:43:00Z) - HDR Reconstruction from Bracketed Exposures and Events [12.565039752529797]
高品質なHDR画像の再構成は、現代の計算写真の中心にある。
特徴領域におけるブラケット画像とイベントを融合したマルチモーダルなエンドツーエンド学習型HDRイメージングシステムを提案する。
我々のフレームワークは、スライディングウィンドウを使用して入力イベントストリームをサブサンプリングすることで、イベントの時間分解能を高める。
論文 参考訳(メタデータ) (2022-03-28T15:04:41Z) - MantissaCam: Learning Snapshot High-dynamic-range Imaging with
Perceptually-based In-pixel Irradiance Encoding [39.78877654934457]
ハイダイナミックレンジ(HDR)画像は多くのコンピュータビジョンアプリケーションにおいて不可欠である。
ここでは、従来の照射アンラッピング法よりも優れたニューラルネットワークベースのアルゴリズムを設計する。
プログラム可能なセンサで実装したプロトタイプMantissaCamの予備的な結果を示す。
論文 参考訳(メタデータ) (2021-12-09T21:32:10Z) - Wavelet-Based Network For High Dynamic Range Imaging [64.66969585951207]
光学フローベースやエンド・ツー・エンドのディープラーニングベースのソリューションのような既存の方法は、詳細な復元やゴーストを除去する際にエラーを起こしやすい。
本研究では、周波数領域でHDR融合を行うための新しい周波数誘導型エンド・ツー・エンドディープニューラルネットワーク(FNet)を提案し、ウェーブレット変換(DWT)を用いて入力を異なる周波数帯域に分解する。
低周波信号は特定のゴーストアーティファクトを避けるために使用され、高周波信号は詳細を保存するために使用される。
論文 参考訳(メタデータ) (2021-08-03T12:26:33Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。