論文の概要: Lightweight Deep Learning Architecture for MPI Correction and Transient
Reconstruction
- arxiv url: http://arxiv.org/abs/2111.14396v1
- Date: Mon, 29 Nov 2021 09:31:35 GMT
- ステータス: 処理完了
- システム内更新日: 2021-11-30 17:01:50.367598
- Title: Lightweight Deep Learning Architecture for MPI Correction and Transient
Reconstruction
- Title(参考訳): MPI補正と過渡的再構成のための軽量ディープラーニングアーキテクチャ
- Authors: Adriano Simonetto, Gianluca Agresti, Pietro Zanuttigh and Henrik
Sch\"afer
- Abstract要約: 間接飛行時間カメラ(iToF)は、フレームレートで深度画像を提供する安価な装置である。
それらは異なる誤差源の影響を受けており、Multi-Path Interference (MPI) が捉えたスポットライトがある。
一般的なデータ駆動のアプローチは、シーン内の光の過渡伝播を無視して出力の深さ値の直接推定に焦点を当てる傾向がある。
我々は,MPIの除去と過渡情報自体の再構築のために,過渡情報の直接分割を利用する,非常にコンパクトなアーキテクチャを提案する。
- 参考スコア(独自算出の注目度): 19.040317739792787
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: Indirect Time-of-Flight cameras (iToF) are low-cost devices that provide
depth images at an interactive frame rate. However, they are affected by
different error sources, with the spotlight taken by Multi-Path Interference
(MPI), a key challenge for this technology. Common data-driven approaches tend
to focus on a direct estimation of the output depth values, ignoring the
underlying transient propagation of the light in the scene. In this work
instead, we propose a very compact architecture, leveraging on the
direct-global subdivision of transient information for the removal of MPI and
for the reconstruction of the transient information itself. The proposed model
reaches state-of-the-art MPI correction performances both on synthetic and real
data and proves to be very competitive also at extreme levels of noise; at the
same time, it also makes a step towards reconstructing transient information
from multi-frequency iToF data.
- Abstract(参考訳): 間接飛行時間カメラ(iToF)は、フレームレートで深度画像を提供する安価な装置である。
しかし、それらは異なるエラーソースの影響を受けており、マルチパス干渉(MPI)によるスポットライトは、この技術の重要な課題である。
一般的なデータ駆動型アプローチは、シーン内の光の過渡伝播を無視して出力深さ値の直接推定に焦点を当てる傾向がある。
そこで本研究では,MPIの除去と過渡情報自体の再構築のために,過渡情報の直接部分分割を利用する,非常にコンパクトなアーキテクチャを提案する。
提案したモデルは,合成データと実データの両方で最先端のMPI補正性能に到達し,超高レベルのノイズでも非常に競合することを示すと同時に,多周波iToFデータから過渡的な情報を再構成するステップも進めている。
関連論文リスト
- Holistic Dynamic Frequency Transformer for Image Fusion and Exposure
Correction [19.088429172840428]
露出関連問題の修正は、画像の品質向上における重要な要素である。
本稿では、周波数領域を利用して露出補正タスクの処理を改善し、統一する新しい手法を提案する。
提案手法は, 露光補正においてより高度で統一された解を実現する方法である。
論文 参考訳(メタデータ) (2023-09-03T14:09:14Z) - Enhancing Low-light Light Field Images with A Deep Compensation
Unfolding Network [52.77569396659629]
本稿では,低光環境下で撮像した光場(LF)画像の復元に,DCUNet(Deep compensation network openfolding)を提案する。
このフレームワークは、中間拡張結果を使用して照明マップを推定し、展開プロセスで新しい拡張結果を生成する。
本稿では,LF画像の特徴を適切に活用するために,擬似明示的特徴相互作用モジュールを提案する。
論文 参考訳(メタデータ) (2023-08-10T07:53:06Z) - Revisiting Event-based Video Frame Interpolation [49.27404719898305]
ダイナミックビジョンセンサーやイベントカメラは、ビデオフレームに豊富な補完情報を提供する。
イベントからの光の流れを推定することは、RGB情報より間違いなく困難である。
イベントベースの中間フレーム合成を複数の単純化段階において漸進的に行う分割・対数戦略を提案する。
論文 参考訳(メタデータ) (2023-07-24T06:51:07Z) - Embracing Compact and Robust Architectures for Multi-Exposure Image
Fusion [50.598654017728045]
本稿では,堅牢なマルチ露光画像融合のための自己アライメントとディテールリプレクションモジュールを含む探索型パラダイムを提案する。
シーンリライティングと変形可能な畳み込みを利用して、カメラの動きに拘わらず、画像を正確に調整することができる。
我々は、様々な競争方式と比較して最先端の性能を実現し、一般的なシナリオと不整合シナリオに対するPSNRの4.02%と29.34%の改善を実現した。
論文 参考訳(メタデータ) (2023-05-20T17:01:52Z) - Blur Interpolation Transformer for Real-World Motion from Blur [52.10523711510876]
本稿では, ボケの時間的相関を解き明かすために, 符号化されたブラー変換器(BiT)を提案する。
マルチスケール残留スウィン変圧器ブロックに基づいて、両端の時間的監督と時間対称なアンサンブル戦略を導入する。
さらに,1対1のぼやけたビデオペアの最初の実世界のデータセットを収集するハイブリッドカメラシステムを設計する。
論文 参考訳(メタデータ) (2022-11-21T13:10:10Z) - Wavelet-Based Network For High Dynamic Range Imaging [64.66969585951207]
光学フローベースやエンド・ツー・エンドのディープラーニングベースのソリューションのような既存の方法は、詳細な復元やゴーストを除去する際にエラーを起こしやすい。
本研究では、周波数領域でHDR融合を行うための新しい周波数誘導型エンド・ツー・エンドディープニューラルネットワーク(FNet)を提案し、ウェーブレット変換(DWT)を用いて入力を異なる周波数帯域に分解する。
低周波信号は特定のゴーストアーティファクトを避けるために使用され、高周波信号は詳細を保存するために使用される。
論文 参考訳(メタデータ) (2021-08-03T12:26:33Z) - iToF2dToF: A Robust and Flexible Representation for Data-Driven
Time-of-Flight Imaging [26.17890136713725]
間接飛行時間(iToF)カメラは、有望な深度検出技術です。
マルチパス干渉(MPI)と低信号対雑音比(SNR)によって引き起こされるエラーが発生しやすい。
論文 参考訳(メタデータ) (2021-03-12T04:57:52Z) - Deep Burst Super-Resolution [165.90445859851448]
バースト超解像タスクのための新しいアーキテクチャを提案する。
我々のネットワークは複数のノイズRAW画像を入力として取り出し、出力として分解された超解像RGB画像を生成する。
実世界のデータのトレーニングと評価を可能にするため,BurstSRデータセットも導入する。
論文 参考訳(メタデータ) (2021-01-26T18:57:21Z) - Boosting Image Super-Resolution Via Fusion of Complementary Information
Captured by Multi-Modal Sensors [21.264746234523678]
イメージスーパーレゾリューション(sr)は、低解像度光センサの画質を向上させる有望な技術である。
本稿では,安価なチャネル(可視・深度)からの補完情報を活用して,少ないパラメータを用いて高価なチャネル(熱)の画像品質を向上させる。
論文 参考訳(メタデータ) (2020-12-07T02:15:28Z) - Deep Non-Line-of-Sight Reconstruction [18.38481917675749]
本稿では,再構成問題を効率的に解くために,畳み込みフィードフォワードネットワークを用いる。
本研究では,自動エンコーダアーキテクチャを設計し,一貫した画像を直接深度マップ表現にマッピングする。
筆者らのフィードフォワードネットワークは,合成データのみに基づいて訓練されているものの,SPADセンサの計測データに一般化し,モデルに基づく再構成手法と競合する結果が得られることを示した。
論文 参考訳(メタデータ) (2020-01-24T16:05:50Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。