論文の概要: Low-Light Video Enhancement with Synthetic Event Guidance
- arxiv url: http://arxiv.org/abs/2208.11014v1
- Date: Tue, 23 Aug 2022 14:58:29 GMT
- ステータス: 処理完了
- システム内更新日: 2022-08-24 13:25:33.715211
- Title: Low-Light Video Enhancement with Synthetic Event Guidance
- Title(参考訳): 合成イベント誘導による低光度映像強調
- Authors: Lin Liu and Junfeng An and Jianzhuang Liu and Shanxin Yuan and Xiangyu
Chen and Wengang Zhou and Houqiang Li and Yanfeng Wang and Qi Tian
- Abstract要約: 我々は、複数のフレームから合成イベントを使用して、低照度ビデオの強化と復元を誘導する。
本手法は,合成と実の両方のLLVEデータセットにおいて,既存の低照度映像や単一画像強調手法より優れる。
- 参考スコア(独自算出の注目度): 188.7256236851872
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: Low-light video enhancement (LLVE) is an important yet challenging task with
many applications such as photographing and autonomous driving. Unlike single
image low-light enhancement, most LLVE methods utilize temporal information
from adjacent frames to restore the color and remove the noise of the target
frame. However, these algorithms, based on the framework of multi-frame
alignment and enhancement, may produce multi-frame fusion artifacts when
encountering extreme low light or fast motion. In this paper, inspired by the
low latency and high dynamic range of events, we use synthetic events from
multiple frames to guide the enhancement and restoration of low-light videos.
Our method contains three stages: 1) event synthesis and enhancement, 2) event
and image fusion, and 3) low-light enhancement. In this framework, we design
two novel modules (event-image fusion transform and event-guided dual branch)
for the second and third stages, respectively. Extensive experiments show that
our method outperforms existing low-light video or single image enhancement
approaches on both synthetic and real LLVE datasets.
- Abstract(参考訳): 低照度ビデオエンハンスメント(LLVE)は、撮影や自動運転など多くの応用において重要な課題である。
単一画像の低照度化とは異なり、ほとんどのLLVE法は隣接フレームからの時間情報を利用して色を復元し、ターゲットフレームのノイズを取り除く。
しかし、マルチフレームアライメントと拡張の枠組みに基づくこれらのアルゴリズムは、極端な低光度や高速運動に遭遇すると、マルチフレーム融合アーティファクトを生成する可能性がある。
本稿では,低レイテンシと高ダイナミックレンジのイベントに着想を得て,複数のフレームからの合成イベントを用いて,低照度ビデオのエンハンスメントと復元のガイドを行う。
方法には3つの段階があります
1)イベント合成及び強化
2)事象と画像の融合、及び
3)低照度化。
本研究では,第2段階と第3段階の2つの新しいモジュール(イベント像融合変換とイベント誘導二重分岐)を設計する。
広汎な実験により,本手法は,合成と実の両方のLLVEデータセットにおいて,既存の低照度映像や単一画像強調手法よりも優れていた。
関連論文リスト
- Light-A-Video: Training-free Video Relighting via Progressive Light Fusion [52.420894727186216]
Light-A-Videoは、時間的にスムーズなビデオリライティングを実現するためのトレーニング不要のアプローチである。
Light-A-Videoは、画像のリライティングモデルに適応して、照明の一貫性を高める2つの重要な技術を導入している。
論文 参考訳(メタデータ) (2025-02-12T17:24:19Z) - Lumina-Video: Efficient and Flexible Video Generation with Multi-scale Next-DiT [98.56372305225271]
Lumina-Nextは、Next-DiTによる画像生成において、例外的なパフォーマンスを実現している。
Lumina-VideoにはマルチスケールのNext-DiTアーキテクチャが組み込まれており、複数のパッチを共同で学習している。
本稿では,Next-DiTに基づく音声合成モデルであるLumina-V2Aを提案する。
論文 参考訳(メタデータ) (2025-02-10T18:58:11Z) - DLEN: Dual Branch of Transformer for Low-Light Image Enhancement in Dual Domains [0.0]
低照度画像強調(LLE)は、低照度条件下で撮影された画像の視覚的品質を改善することを目的としている。
これらの問題は、物体検出、顔認識、自律運転などのコンピュータビジョンタスクのパフォーマンスを妨げる。
本稿では,2つの異なる注意機構を組み込んだ新しいアーキテクチャであるDual Light Enhance Network(DLEN)を提案する。
論文 参考訳(メタデータ) (2025-01-21T15:58:16Z) - Towards Real-world Event-guided Low-light Video Enhancement and Deblurring [39.942568142125126]
イベントカメラは、低照度環境における画質向上のための有望なソリューションとして登場した。
これらのタスクを効果的に処理するためのエンドツーエンドフレームワークを導入します。
我々のフレームワークは、イベントやフレームからの時間情報を効率的に活用するためのモジュールを組み込んでいます。
論文 参考訳(メタデータ) (2024-08-27T09:44:54Z) - BVI-RLV: A Fully Registered Dataset and Benchmarks for Low-Light Video Enhancement [56.97766265018334]
本稿では,2つの異なる低照度条件下での様々な動きシナリオを持つ40のシーンからなる低照度映像データセットを提案する。
我々は、プログラム可能なモータードリーを用いて、通常の光で捉えた完全に登録された地上真実データを提供し、異なる光レベルにわたるピクセルワイドフレームアライメントのための画像ベースアプローチによりそれを洗練する。
実験の結果,Low-light Video enhancement (LLVE) における完全登録ビデオペアの重要性が示された。
論文 参考訳(メタデータ) (2024-07-03T22:41:49Z) - Lumina-Next: Making Lumina-T2X Stronger and Faster with Next-DiT [120.39362661689333]
本稿では,Lumina-T2Xの改良版を提案する。
これらの改善により、Lumina-Nextは基本的なテキスト・ツー・イメージ生成の品質と効率を向上するだけでなく、優れた解像度の補間能力も示している。
論文 参考訳(メタデータ) (2024-06-05T17:53:26Z) - CodeEnhance: A Codebook-Driven Approach for Low-Light Image Enhancement [97.95330185793358]
低照度画像強調(LLIE)は、低照度画像を改善することを目的としている。
既存の手法では、様々な明るさ劣化からの回復の不確実性と、テクスチャと色情報の喪失という2つの課題に直面している。
我々は、量子化された先行値と画像の精細化を利用して、新しいエンハンスメント手法、CodeEnhanceを提案する。
論文 参考訳(メタデータ) (2024-04-08T07:34:39Z) - Event-based Continuous Color Video Decompression from Single Frames [36.4263932473053]
本研究では,静止RGB画像とイベントカメラストリームから連続映像を生成する新しい手法であるContinuityCamを提案する。
提案手法は、連続した長距離動きモデリングとニューラル合成モデルを組み合わせることで、イベント内の任意のタイミングでフレーム予測を可能にする。
論文 参考訳(メタデータ) (2023-11-30T18:59:23Z) - Bridge the Vision Gap from Field to Command: A Deep Learning Network
Enhancing Illumination and Details [17.25188250076639]
我々は,明るさを調整し,細部を同時に強化する2ストリームフレームワークNEIDを提案する。
提案手法は,光強調 (LE), 細粒化 (DR), 特徴拡散 (FF) モジュールの3つの部分から構成される。
論文 参考訳(メタデータ) (2021-01-20T09:39:57Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。