論文の概要: Moment-Reenacting: Inverse Motion Degradation with Cross-shutter Guidance
- arxiv url: http://arxiv.org/abs/2605.22423v2
- Date: Fri, 22 May 2026 03:42:26 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-05-25 14:44:53.782777
- Title: Moment-Reenacting: Inverse Motion Degradation with Cross-shutter Guidance
- Title(参考訳): モーメント再生:クロスシャッター誘導による逆運動劣化
- Authors: Xiang Ji, Guixu Lin, Zhengwei Yin, Jiancheng Zhao, Yinqiang Zheng,
- Abstract要約: 運動劣化を逆転し、画像モーメントを再現する統一的な枠組みを提案する。
本稿では,同期化Blub-RS画像ペアをキャプチャする新しいデュアルシャッター構成を提案する。
柔軟なパフォーマンスコストのトレードオフを可能にするため、このデュアルシャッター設定をステレオBlur-RS構成に拡張する。
- 参考スコア(独自算出の注目度): 38.2932325938093
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Motion degradation, manifested as blur in global shutter (GS) images or rolling shutter (RS) distortion in RS counterparts, remains a fundamental challenge in computational imaging, especially under fast motion or low-light conditions. While prior works have treated blur decomposition and RS temporal super-resolution as separate tasks, this separation fails to exploit their intrinsic complementarity. In this paper, we propose a unified framework to invert motion degradation and reenact imaging moment by jointly leveraging the complementary characteristics of GS blur and RS distortion. To this end, we introduce a novel dual-shutter setup that captures synchronized blur-RS image pairs and demonstrate that this combination effectively resolves temporal and spatial ambiguities inherent in both modalities. For allowing flexible performance-cost trade-offs, we further extend this dual-shutter setup to a stereo Blur-RS configuration with a narrow baseline. In addition, we construct a triaxial imaging system to collect a real-world dataset with aligned GS-RS pairs and ground-truth high-speed frames, enabling robust training and evaluation beyond synthetic data. Our proposed network explicitly disentangles motion into context-aware and temporally-sensitive representations via a dual-stream motion interpretation module, followed by a self-prompted frame reconstruction stage. Extensive experiments validate the superiority and generalizability of our approach, establishing a new paradigm for realistic high-speed video reconstruction under complex motion degradations. Codes and more resources are available at https://jixiang2016.github.io/dualBR_site/.
- Abstract(参考訳): 運動劣化は、グローバルシャッター(GS)画像やローリングシャッター(RS)歪みで表されるが、特に高速な動きや低照度条件下では、計算画像の基本的な課題である。
従来の作業では、ぼやけた分解とRSの時間的超解像を別のタスクとして扱っていたが、この分離は固有の相補性を利用するには至らなかった。
本稿では,GSのぼかしとRS歪みの相補的特性を両立させることにより,動きの劣化を回避し,画像モーメントを再現する統一的な枠組みを提案する。
そこで本研究では,両モードに固有の時間的・空間的あいまいさを効果的に解決できることを実証する。
フレキシブルなパフォーマンスコストのトレードオフを可能にするため、この2重シャッター設定をさらに細いベースラインを持つステレオBlur-RS構成に拡張する。
さらに, 3軸撮像システムを構築し, GS-RSペアと地上トラス高速フレームを用いた実世界のデータセットを収集し, 合成データを超えた堅牢なトレーニングと評価を可能にする。
提案するネットワークは,2重ストリーム動作解釈モジュールを用いて,動きを文脈認識および時間感応的表現に明示的に切り離し,それに続いてフレーム再構築を行う。
広汎な実験により、我々のアプローチの優位性と一般化性が検証され、複雑な動き劣化下での現実的な高速ビデオ再構成のための新しいパラダイムが確立された。
コードやその他のリソースはhttps://jixiang2016.github.io/dualBR_site/.comで入手できる。
関連論文リスト
- Self-supervised Learning to Bring Dual Reversed Rolling Shutter Images
Alive [56.70381414277253]
デュアルRS歪み補正のための自己教師型学習フレームワーク(SelfDRSC)を提案する。
DRSCネットワークは、逆歪みを持つデュアルRS画像のみに基づいて、高いフレームレートGS映像を生成することができる。
実世界のRSのケースでは、SelfDRSCはより微細な補正テクスチャとより優れた一時的な一貫性を備えたフレームレートのハイテクビデオを生成することができる。
論文 参考訳(メタデータ) (2023-05-31T13:55:00Z) - UniINR: Event-guided Unified Rolling Shutter Correction, Deblurring, and Interpolation [20.866360240444426]
高速カメラ移動中にローリングシャッター(RS)カメラで捉えたビデオフレームは、RS歪みとぼやけを同時に示している。
我々は、RSぼけフレームとペアイベントから任意のフレームレートのシャープGSフレームを復元する、UniINRという新しい手法を提案する。
提案手法は, パラメータ0.38Mしか持たない軽量モデルであり, 高効率であり, RSブラーフレームの31倍のフレームレートで2.83ms/frameを実現している。
論文 参考訳(メタデータ) (2023-05-24T11:57:03Z) - Rolling Shutter Inversion: Bring Rolling Shutter Images to High
Framerate Global Shutter Video [111.08121952640766]
本稿では,RS時相超解問題に対する新しいディープラーニングに基づく解法を提案する。
RSイメージングプロセスの多視点幾何関係を利用して,高フレームレートGS生成を実現する。
提案手法は,高精細で高品質なGS画像系列を生成でき,最先端の手法よりも優れている。
論文 参考訳(メタデータ) (2022-10-06T16:47:12Z) - Context-Aware Video Reconstruction for Rolling Shutter Cameras [52.28710992548282]
本稿では,文脈対応のGSビデオ再構成アーキテクチャを提案する。
まず、2つのRSフレームの画素が共通のGSフレームに歪むように、左右の運動場を推定する。
そこで,両面閉塞マスクとともにGSフレーム合成を誘導し,高忠実度GSビデオフレームを生成するための改良手法を提案する。
論文 参考訳(メタデータ) (2022-05-25T17:05:47Z) - Bringing Rolling Shutter Images Alive with Dual Reversed Distortion [75.78003680510193]
ローリングシャッター(RS)歪みは、時間とともにインスタントグローバルシャッター(GS)フレームから一列のピクセルを選択した結果であると解釈することができる。
我々は、RS時間における速度場の反復学習を通して、デュアル光流列を生成するための新しいエンド・ツー・エンドモデルIFEDを開発した。
論文 参考訳(メタデータ) (2022-03-12T14:57:49Z) - Blind Motion Deblurring Super-Resolution: When Dynamic Spatio-Temporal
Learning Meets Static Image Understanding [87.5799910153545]
シングルイメージ超解像(SR)とマルチフレームSR(SR)は、低解像度画像を超解する2つの方法である。
単一静止画像から動的時間情報を学習するために, ブラインド・モーション・デブロアリング・スーパー・レゾリューション・ネットワークを提案する。
論文 参考訳(メタデータ) (2021-05-27T11:52:45Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。