論文の概要: CDFI: Compression-Driven Network Design for Frame Interpolation
- arxiv url: http://arxiv.org/abs/2103.10559v1
- Date: Thu, 18 Mar 2021 22:59:42 GMT
- ステータス: 処理完了
- システム内更新日: 2021-03-22 14:35:09.308667
- Title: CDFI: Compression-Driven Network Design for Frame Interpolation
- Title(参考訳): cdfi:フレーム補間のための圧縮駆動ネットワーク設計
- Authors: Tianyu Ding, Luming Liang, Zhihui Zhu, Ilya Zharkov
- Abstract要約: フレームサイズに対する圧縮駆動型ネットワーク設計を提案する。
10X圧縮AdaCoFモデルがオリジナルのモデルと同じ性能を示すことを示す。
私たちのモデルは、幅広いデータセットの他の最先端のものに対して有利に動作します。
- 参考スコア(独自算出の注目度): 24.205673014182356
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: DNN-based frame interpolation--that generates the intermediate frames given
two consecutive frames--typically relies on heavy model architectures with a
huge number of features, preventing them from being deployed on systems with
limited resources, e.g., mobile devices. We propose a compression-driven
network design for frame interpolation (CDFI), that leverages model pruning
through sparsity-inducing optimization to significantly reduce the model size
while achieving superior performance. Concretely, we first compress the
recently proposed AdaCoF model and show that a 10X compressed AdaCoF performs
similarly as its original counterpart; then we further improve this compressed
model by introducing a multi-resolution warping module, which boosts visual
consistencies with multi-level details. As a consequence, we achieve a
significant performance gain with only a quarter in size compared with the
original AdaCoF. Moreover, our model performs favorably against other
state-of-the-arts in a broad range of datasets. Finally, the proposed
compression-driven framework is generic and can be easily transferred to other
DNN-based frame interpolation algorithm. Our source code is available at
https://github.com/tding1/CDFI.
- Abstract(参考訳): DNNベースのフレーム補間 - 2つの連続するフレームが与えられた中間フレームを生成する - 典型的には、多数の特徴を持つ重モデルアーキテクチャに依存しており、モバイルデバイスのような限られたリソースを持つシステムにデプロイされない。
本稿では,フレーム補間 (CDFI) のための圧縮駆動型ネットワーク設計法を提案する。
具体的には、最近提案されたAdaCoFモデルをまず圧縮し、10X圧縮されたAdaCoFが元のモデルと同じ性能を示すことを示す。
その結果,従来のAdaCoFに比べてわずか4分の1の大きさで大幅な性能向上を達成した。
さらに,本モデルは,幅広いデータセットにおいて,他の最先端技術に対して好適に機能する。
最後に、提案する圧縮駆動フレームワークは汎用的であり、他のDNNベースのフレーム補間アルゴリズムに容易に転送できる。
ソースコードはhttps://github.com/tding1/cdfiで入手できます。
関連論文リスト
- A Lightweight Feature Fusion Architecture For Resource-Constrained Crowd
Counting [3.5066463427087777]
クラウドカウントモデルの汎用性を高めるために,2つの軽量モデルを導入する。
これらのモデルは、MobileNetとMobileViTという2つの異なるバックボーンを持ちながら、同じダウンストリームアーキテクチャを維持している。
隣接特徴融合を利用して、事前学習モデル(PTM)から多様な特徴を抽出し、その後、シームレスにこれらの特徴を組み合わせる。
論文 参考訳(メタデータ) (2024-01-11T15:13:31Z) - AMT: All-Pairs Multi-Field Transforms for Efficient Frame Interpolation [80.33846577924363]
ビデオフレームギスブのための新しいネットワークアーキテクチャであるAMT(All-Pairs Multi-Field Transforms)を提案する。
まず、すべての画素に対して双方向のボリュームを構築し、予測された両側フローを用いて相関関係を検索する。
第2に、入力フレーム上で逆向きのワープを行うために、一対の更新された粗い流れから細粒度の流れ場の複数のグループを導出する。
論文 参考訳(メタデータ) (2023-04-19T16:18:47Z) - Sparsity-guided Network Design for Frame Interpolation [39.828644638174225]
フレームベースアルゴリズムのための圧縮駆動型ネットワーク設計を提案する。
モデルサイズを大幅に削減するために、スパーシリティ誘導最適化によるモデルプルーニングを活用する。
原型AdaCoFの4分の1の大きさで大幅な性能向上を実現しています。
論文 参考訳(メタデータ) (2022-09-09T23:13:25Z) - Multi-encoder Network for Parameter Reduction of a Kernel-based
Interpolation Architecture [10.08097582267397]
畳み込みニューラルネットワーク(CNN)はこの分野での最近の進歩の最前線にある。
これらのネットワークの多くは多くのパラメータを必要とし、多くのパラメータは重い重荷を意味する。
本稿では,一般的なフローレスカーネルネットワークにおけるパラメータ削減手法を提案する。
論文 参考訳(メタデータ) (2022-05-13T16:02:55Z) - DeMFI: Deep Joint Deblurring and Multi-Frame Interpolation with
Flow-Guided Attentive Correlation and Recursive Boosting [50.17500790309477]
DeMFI-Netは、共同でデブロアリングとマルチフレームのフレームワークである。
低フレームレートのぼやけたビデオを高フレームレートでシャープなビデオに変換する。
多様なデータセットに対して、最先端(SOTA)のパフォーマンスを実現する。
論文 参考訳(メタデータ) (2021-11-19T00:00:15Z) - Collegial Ensembles [11.64359837358763]
我々は,群畳み込みと対角線ブロックを用いた実用的アーキテクチャにおいて,コレギアルアンサンブルを効率的に実装可能であることを示す。
また、一つのモデルをトレーニングすることなく、最適なグループ畳み込みモジュールを解析的に導き出すために、我々のフレームワークをどのように利用できるかを示す。
論文 参考訳(メタデータ) (2020-06-13T16:40:26Z) - A Generic Network Compression Framework for Sequential Recommender
Systems [71.81962915192022]
シークエンシャルレコメンデーションシステム(SRS)は,ユーザの動的関心を捉え,高品質なレコメンデーションを生成する上で重要な技術となっている。
CpRecと呼ばれる圧縮されたシーケンシャルレコメンデーションフレームワークを提案する。
大規模なアブレーション研究により、提案したCpRecは実世界のSRSデータセットにおいて最大4$sim$8倍の圧縮速度を達成できることを示した。
論文 参考訳(メタデータ) (2020-04-21T08:40:55Z) - Normalizing Flows with Multi-Scale Autoregressive Priors [131.895570212956]
マルチスケール自己回帰前処理(mAR)を通した遅延空間におけるチャネルワイド依存性を導入する。
我々のmARは、分割結合フロー層(mAR-SCF)を持つモデルに先立って、複雑なマルチモーダルデータの依存関係をよりよく捉えます。
我々は,mAR-SCFにより画像生成品質が向上し,FIDとインセプションのスコアは最先端のフローベースモデルと比較して向上したことを示す。
論文 参考訳(メタデータ) (2020-04-08T09:07:11Z) - Neural Network Compression Framework for fast model inference [59.65531492759006]
我々は、ニューラルネットワーク圧縮フレームワーク(NNCF)と呼ばれる、微調整によるニューラルネットワーク圧縮のための新しいフレームワークを提案する。
様々なネットワーク圧縮手法の最近の進歩を活用し、空間性、量子化、双項化などのいくつかの実装を行っている。
フレームワークは、トレーニングサンプル内に提供され、あるいは既存のトレーニングコードにシームレスに統合可能なスタンドアロンパッケージとして使用することができる。
論文 参考訳(メタデータ) (2020-02-20T11:24:01Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。