論文の概要: Event-based Camera Simulation using Monte Carlo Path Tracing with
Adaptive Denoising
- arxiv url: http://arxiv.org/abs/2303.02608v1
- Date: Sun, 5 Mar 2023 08:44:01 GMT
- ステータス: 処理完了
- システム内更新日: 2023-03-07 18:43:43.589650
- Title: Event-based Camera Simulation using Monte Carlo Path Tracing with
Adaptive Denoising
- Title(参考訳): 適応Denoisingを用いたモンテカルロ経路追跡を用いたイベントベースカメラシミュレーション
- Authors: Yuta Tsuji, Tatsuya Yatagawa, Hiroyuki Kubo, Shigeo Morishima
- Abstract要約: 本稿では, 合成3Dシーンのモンテカルロ経路追跡法を用いて, ノイズの多い入力ビデオからイベントベース映像を得るアルゴリズムを提案する。
動的視覚センサ(DVS)は、事象としての時間輝度変化を検出するため、イベントベースの映像を効率よくレンダリングする問題は、ノイズ輝度値から変化を検出するために沸騰する。
重み付き局所回帰(WLR)に基づく復調法を拡張し,各映像フレームに復調を施すのではなく,明るさ変化を検出する。
- 参考スコア(独自算出の注目度): 15.207948565344822
- License: http://creativecommons.org/licenses/by-nc-sa/4.0/
- Abstract: This paper proposes an algorithm for obtaining an event-based video from a
noisy input video given by physics-based Monte Carlo path tracing of synthetic
3D scenes. Since the dynamic vision sensor (DVS) detects temporal brightness
changes as events, the problem of efficiently rendering event-based video boils
down to detecting the changes from noisy brightness values. To this end, we
extend a denoising method based on a weighted local regression (WLR) to detect
the brightness changes rather than applying denoising to each video frame.
Specifically, we regress a WLR model only on frames where an event is detected,
which significantly reduces the computational cost of the regression. We show
that our efficient method is robust to noisy video frames obtained from a few
path-traced samples and performs comparably to or even better than an approach
that denoises every frame.
- Abstract(参考訳): 本稿では, 合成3Dシーンのモンテカルロ経路追跡法を用いて, ノイズの多い入力ビデオからイベントベース映像を得るアルゴリズムを提案する。
動的視覚センサ(DVS)は、事象としての時間輝度変化を検出するため、イベントベースの映像を効率よくレンダリングする問題は、ノイズ輝度値から変化を検出するために沸騰する。
この目的のために,重み付き局所回帰(wlr)に基づくデノイジング法を拡張し,各映像フレームにデノイジンを適用するのではなく,輝度変化を検出する。
具体的には、イベントが検出されたフレームのみにWLRモデルを回帰することで、回帰の計算コストを大幅に削減する。
提案手法は,数個のパストレーシングサンプルから得られるノイズの多いビデオフレームに対して頑健であり,各フレームを識別するアプローチと同等かそれ以上に動作することを示す。
関連論文リスト
- Temporal As a Plugin: Unsupervised Video Denoising with Pre-Trained Image Denoisers [30.965705043127144]
本稿では,TAP (Temporal As aTAP) という,教師なしのビデオデノベーションフレームワークを提案する。
時間的加群を組み込むことで、ノイズの多いフレームをまたがる時間的情報を活用することができ、空間的 denoising のパワーを補完することができる。
他の教師なしビデオ復号化手法と比較して,本フレームワークは,SRGBと生ビデオ復号化データセットの両方において優れた性能を示す。
論文 参考訳(メタデータ) (2024-09-17T15:05:33Z) - FaVoR: Features via Voxel Rendering for Camera Relocalization [23.7893950095252]
カメラ再ローカライズ手法は、高密度画像アライメントから、クエリ画像からの直接カメラポーズ回帰まで様々である。
本稿では,世界規模で疎密だが局所的に密集した2次元特徴の3次元表現を活用する新しい手法を提案する。
一連のフレーム上でのランドマークの追跡と三角測量により、追跡中に観察された画像パッチ記述子をレンダリングするために最適化されたスパースボクセルマップを構築する。
論文 参考訳(メタデータ) (2024-09-11T18:58:16Z) - AdaDiff: Adaptive Step Selection for Fast Diffusion [88.8198344514677]
我々は、インスタンス固有のステップ利用ポリシーを学ぶために設計されたフレームワークであるAdaDiffを紹介する。
AdaDiffはポリシー勾配法を用いて最適化され、慎重に設計された報酬関数を最大化する。
提案手法は,固定された50ステップを用いて,ベースラインと比較して視覚的品質の点で同様の結果が得られる。
論文 参考訳(メタデータ) (2023-11-24T11:20:38Z) - DiffSED: Sound Event Detection with Denoising Diffusion [70.18051526555512]
生成学習の観点からSED問題を再構築する。
具体的には,騒音拡散過程において,雑音のある提案から音の時間境界を生成することを目的としている。
トレーニング中は,ノイズの多い遅延クエリを基本バージョンに変換することで,ノイズ発生過程の逆転を学習する。
論文 参考訳(メタデータ) (2023-08-14T17:29:41Z) - Advancing Unsupervised Low-light Image Enhancement: Noise Estimation, Illumination Interpolation, and Self-Regulation [55.07472635587852]
低光画像強調(LLIE)技術は、画像の詳細の保存とコントラストの強化に顕著な進歩をもたらした。
これらのアプローチは、動的ノイズを効率的に緩和し、様々な低照度シナリオを収容する上で、永続的な課題に直面する。
まず,低照度画像の雑音レベルを迅速かつ高精度に推定する方法を提案する。
次に、照明と入力の一般的な制約を満たすために、Learningable Illumination Interpolator (LII) を考案する。
論文 参考訳(メタデータ) (2023-05-17T13:56:48Z) - RViDeformer: Efficient Raw Video Denoising Transformer with a Larger
Benchmark Dataset [16.131438855407175]
教師付き生ビデオのデノベーションのためのリアルな動きを持つ大規模なデータセットは存在しない。
ノイズクリーンな120グループからなるビデオデノケーションデータセット(ReCRVDと名づけられた)を構築した。
短距離・長距離の相関関係を探索するRViDeformer(RViDeformer)を提案する。
論文 参考訳(メタデータ) (2023-05-01T11:06:58Z) - Event-aided Direct Sparse Odometry [54.602311491827805]
本稿では,イベントとフレームを用いた直接単眼視覚計測法であるEDSを紹介する。
我々のアルゴリズムは、イベント生成モデルを利用して、フレーム間のブラインドタイムにおけるカメラの動きを追跡する。
EDSは直接アプローチでイベントとフレームを使用して6-DOF VOを実行する最初の方法である。
論文 参考訳(メタデータ) (2022-04-15T20:40:29Z) - IDR: Self-Supervised Image Denoising via Iterative Data Refinement [66.5510583957863]
本稿では,最先端のデノナイジング性能を実現するために,教師なしの実用的なデノナイジング手法を提案する。
本手法では, 1つのノイズ画像と1つのノイズモデルしか必要とせず, 実際の生画像に容易にアクセス可能である。
実世界のアプリケーションにおける生画像復調性能を評価するため,500シーンのシーンを含む高品質な生画像データセットSenseNoise-500を構築した。
論文 参考訳(メタデータ) (2021-11-29T07:22:53Z) - Two-Stage Monte Carlo Denoising with Adaptive Sampling and Kernel Pool [4.194950860992213]
適応的サンプリング戦略に基づく2段階のデノイザーを提案することでモンテカルロレンダリングの問題点に取り組む。
第1段階では,1ピクセル (spp) あたりのサンプルをオンザフライで調整すると同時に,計算を再利用し,適応的に描画された画像に適用した余分なデノナイズカーネルを生成する。
第2段階では,空間-時間安定性を改善するために位置認識プーリングと意味アライメント演算子を設計する。
論文 参考訳(メタデータ) (2021-03-30T07:05:55Z) - Learning Spatial and Spatio-Temporal Pixel Aggregations for Image and
Video Denoising [104.59305271099967]
ピクセル集計ネットワークを提示し、画像デノイジングのためのピクセルサンプリングと平均戦略を学びます。
時間空間にまたがるサンプル画素をビデオデノナイズするための画素集約ネットワークを開発した。
本手法は,動的シーンにおける大きな動きに起因する誤認問題を解決することができる。
論文 参考訳(メタデータ) (2021-01-26T13:00:46Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。