論文の概要: Boosting Video Super Resolution with Patch-Based Temporal Redundancy
Optimization
- arxiv url: http://arxiv.org/abs/2207.08674v1
- Date: Mon, 18 Jul 2022 15:11:18 GMT
- ステータス: 処理完了
- システム内更新日: 2022-07-19 17:09:57.971707
- Title: Boosting Video Super Resolution with Patch-Based Temporal Redundancy
Optimization
- Title(参考訳): パッチベース時間冗長最適化によるビデオ超解像の高速化
- Authors: Yuhao Huang, Hang Dong, Jinshan Pan, Chao Zhu, Yu Guo, Ding Liu, Lean
Fu, Fei Wang
- Abstract要約: 静止物体と背景を持つパッチにおける時間的冗長性の影響について論じる。
我々は,既存の局所的および非局所的伝搬型VSRアルゴリズムの性能向上のための,シンプルで効果的な2つのプラグアンドプレイ法を開発した。
- 参考スコア(独自算出の注目度): 46.833568886576074
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: The success of existing video super-resolution (VSR) algorithms stems mainly
exploiting the temporal information from the neighboring frames. However, none
of these methods have discussed the influence of the temporal redundancy in the
patches with stationary objects and background and usually use all the
information in the adjacent frames without any discrimination. In this paper,
we observe that the temporal redundancy will bring adverse effect to the
information propagation,which limits the performance of the most existing VSR
methods. Motivated by this observation, we aim to improve existing VSR
algorithms by handling the temporal redundancy patches in an optimized manner.
We develop two simple yet effective plug and play methods to improve the
performance of existing local and non-local propagation-based VSR algorithms on
widely-used public videos. For more comprehensive evaluating the robustness and
performance of existing VSR algorithms, we also collect a new dataset which
contains a variety of public videos as testing set. Extensive evaluations show
that the proposed methods can significantly improve the performance of existing
VSR methods on the collected videos from wild scenarios while maintain their
performance on existing commonly used datasets. The code is available at
https://github.com/HYHsimon/Boosted-VSR.
- Abstract(参考訳): 既存のビデオ超解像(VSR)アルゴリズムの成功は、主に隣接するフレームからの時間情報を利用する。
しかし,これらの手法では,パッチの時間的冗長性が静止物体や背景に与える影響を議論することはなく,通常,隣接フレーム内のすべての情報を識別することなく利用する。
本稿では,時間的冗長性が情報伝達に悪影響を及ぼし,既存のVSR手法の性能が制限されることを観察する。
本研究の目的は、時間的冗長パッチを最適化した方法で処理することで既存のVSRアルゴリズムを改善することである。
我々は,既存の局所的および非局所的伝播に基づくvsrアルゴリズムの性能を向上させるための,簡易かつ効果的な2つのプラグ・アンド・プレイ手法を開発した。
既存のVSRアルゴリズムの堅牢性と性能をより包括的に評価するために、テストセットとしてさまざまな公開ビデオを含む新しいデータセットも収集する。
広範評価の結果,提案手法は,既存の一般的なデータセットの性能を維持しつつ,野生のシナリオから収集したビデオ上での既存のVSR手法の性能を大幅に向上させることができることがわかった。
コードはhttps://github.com/hyhsimon/boosted-vsrで入手できる。
関連論文リスト
- Cascaded Temporal Updating Network for Efficient Video Super-Resolution [47.63267159007611]
リカレントベースのVSRネットワークにおけるキーコンポーネントはモデル効率に大きな影響を及ぼす。
本稿では,効率的なVSRのための時空間更新ネットワーク(CTUN)を提案する。
CTUNは,従来の方法に比べて効率と性能のトレードオフが良好である。
論文 参考訳(メタデータ) (2024-08-26T12:59:32Z) - Collaborative Feedback Discriminative Propagation for Video Super-Resolution [66.61201445650323]
ビデオ超解像法(VSR)の主な成功は、主に空間情報と時間情報を探索することに由来する。
不正確なアライメントは通常、重要なアーティファクトを備えたアライメント機能につながる。
伝搬モジュールは同じタイムステップ機能のみを前方または後方に伝播する。
論文 参考訳(メタデータ) (2024-04-06T22:08:20Z) - Benchmark Dataset and Effective Inter-Frame Alignment for Real-World
Video Super-Resolution [65.20905703823965]
ビデオ超解像(VSR)は、高解像度(HR)動画を低解像度(LR)ビデオから再構成することを目的としており、近年大きく進歩している。
既存のVSRメソッドを複雑な劣化を伴う実世界のデータにデプロイすることは依然として困難である。
EAVSRは、提案した多層適応空間変換ネットワーク(MultiAdaSTN)を用いて、事前学習した光フロー推定ネットワークが提供するオフセットを洗練する。
論文 参考訳(メタデータ) (2022-12-10T17:41:46Z) - Sliding Window Recurrent Network for Efficient Video Super-Resolution [0.0]
ビデオ超解像(VSR)は、高解像度のフレームを低解像度の入力列から復元するタスクである。
本研究では,テキストスライディングウィンドウをベースとしたリカレントネットワーク(SWRN)を提案する。
筆者らはREDSデータセットを用いて,提案手法をモバイルデバイスに適用し,視覚的に快適な結果が得られることを示した。
論文 参考訳(メタデータ) (2022-08-24T15:23:44Z) - Fast Online Video Super-Resolution with Deformable Attention Pyramid [172.16491820970646]
ビデオスーパーレゾリューション(VSR)には、ビデオストリーミングやテレビなど、厳格な因果性、リアルタイム、レイテンシの制約を課す多くのアプリケーションがある。
変形性アテンションピラミッド(DAP)に基づく繰り返しVSRアーキテクチャを提案する。
論文 参考訳(メタデータ) (2022-02-03T17:49:04Z) - Real-Time Super-Resolution System of 4K-Video Based on Deep Learning [6.182364004551161]
ビデオレゾリューション(VSR)技術は低品質のビデオ計算において優れており、職業ベースのアルゴリズムによって生じる不快なブラー効果を回避している。
本稿では、リアルタイムVSシステムの可能性について検討し、EGVSRと呼ばれる効率的な汎用VSRネットワークを設計する。
現在最も先進的なVSRネットワークであるTecoGANと比較して、密度の84%削減と7.92倍の性能向上を実現している。
論文 参考訳(メタデータ) (2021-07-12T10:35:05Z) - Self-Supervised Adaptation for Video Super-Resolution [7.26562478548988]
シングルイメージスーパーリゾリューション(SISR)ネットワークは、特定の入力画像にネットワークパラメータを適応させることができます。
従来のビデオスーパーレゾリューション(VSR)ネットワークがビデオフレームをテストするためにパラメータを適応できるようにする新しい学習アルゴリズムを紹介します。
論文 参考訳(メタデータ) (2021-03-18T08:30:24Z) - MuCAN: Multi-Correspondence Aggregation Network for Video
Super-Resolution [63.02785017714131]
ビデオ超解像(VSR)は、複数の低解像度フレームを使用して、各フレームに対して高解像度の予測を生成することを目的としている。
フレーム間およびフレーム内は、時間的および空間的情報を利用するための鍵となるソースである。
VSRのための効果的なマルチ対応アグリゲーションネットワーク(MuCAN)を構築した。
論文 参考訳(メタデータ) (2020-07-23T05:41:27Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。