論文の概要: Accurate Motion Estimation with Bézier Control Point for Efficient Frame Interpolation
- arxiv url: http://arxiv.org/abs/2609.23408v1
- Date: Sun, 20 Sep 2026 06:47:36 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-09-22 20:29:00.812705
- Title: Accurate Motion Estimation with Bézier Control Point for Efficient Frame Interpolation
- Title(参考訳): 効率的なフレーム補間のためのベジエ制御点を用いた高精度動作推定
- Abstract要約: トレーニングセットの運動の曖昧さは、モデルはぼやけた中間フレームを生成する。
効率的なフレーム補間のためのベジエ制御点ABC-Interを用いた高精度動作推定アルゴリズムを提案する。
- 参考スコア(独自算出の注目度): 87.81218062520607
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: In frame interpolation tasks, motion ambiguity in the training set causes models to generate blurry intermediate frames. Moreover, the assumption of uniform motion between frames during inference further leads to inaccuracies in the generated intermediate frames. To tackle these challenges, we propose an Accurate motion estimation algorithm with Bézier Control point, ABC-Inter, for efficient frame Interpolation. Specifically, ABC-Inter designs an Accurate Flow estimation Module (AFM) by decoupling two-frame features and mapping to corresponding coordinates to better estimate the optical flow between the two frames. Furthermore, ABC-Inter eliminates motion ambiguity in the training set by introducing Bézier control points that are computed using the input frames and the intermediate ground-truth (gt) frames. This allows the model to estimate accurate optical flow between two frames during the training process, thereby solving the blurriness problem in the generated intermediate frames during inference. Benefiting from the more accurate flow estimation between two frames, we can introduce additional frames and directly use multiple flows to calculate Bézier control points for modeling non-uniform motion without retraining the model. Simultaneously, to realize the estimation of non-linear motion using only two frames, we also introduce a new Bézier control point estimation module which achieves better motion estimation between the two frames by performing fine-tuning on the model in the second stage. Experimental results demonstrate that our ABC-Inter achieves state-of-the-art performance on multiple benchmark datasets and exhibits excellent visual perception.
- Abstract(参考訳): フレーム補間タスクでは、トレーニングセットの運動のあいまいさにより、モデルはぼやけた中間フレームを生成する。
さらに、推論中のフレーム間の一様運動の仮定は、生成した中間フレームにおける不正確な結果をもたらす。
これらの課題に対処するために,効率的なフレーム補間のためのベジエ制御点ABC-Interを用いた高精度動作推定アルゴリズムを提案する。
具体的には、ABC-Interは、2フレームの特徴を分離し、対応する座標にマッピングすることで、2フレーム間の光学的流れをより正確に推定することで、精度の高いフロー推定モジュール(AFM)を設計する。
さらにABC-Interは、入力フレームと中間接地(gt)フレームを用いて計算されるベジエ制御点を導入することにより、トレーニングセットの運動のあいまいさを解消する。
これにより、トレーニングプロセス中に2つのフレーム間の正確な光流を推定し、推論中に生成された中間フレームのぼやけた問題を解くことができる。
2つのフレーム間のより正確なフロー推定から、追加のフレームを導入し、直接複数のフローを用いてベジエ制御点を計算し、モデルを再訓練することなく非一様運動をモデル化する。
同時に,2つのフレームのみを用いた非線形運動推定を実現するため,第2段階でモデルに微調整を行うことにより,2つのフレーム間でのより優れた動き推定を実現するベジエ制御点推定モジュールを導入する。
実験の結果、ABC-Interは複数のベンチマークデータセット上で最先端の性能を達成し、優れた視覚知覚を示すことがわかった。
関連論文リスト
- Motion-aware Latent Diffusion Models for Video Frame Interpolation [51.78737270917301]
隣接するフレーム間の動き推定は、動きのあいまいさを避ける上で重要な役割を担っている。
我々は、新しい拡散フレームワーク、動き認識潜在拡散モデル(MADiff)を提案する。
提案手法は,既存手法を著しく上回る最先端性能を実現する。
論文 参考訳(メタデータ) (2024-04-21T05:09:56Z) - Motion-Aware Video Frame Interpolation [49.49668436390514]
我々は、連続するフレームから中間光の流れを直接推定する動き対応ビデオフレーム補間(MA-VFI)ネットワークを導入する。
受容場が異なる入力フレームからグローバルな意味関係と空間的詳細を抽出するだけでなく、必要な計算コストと複雑さを効果的に削減する。
論文 参考訳(メタデータ) (2024-02-05T11:00:14Z) - A Multi-In-Single-Out Network for Video Frame Interpolation without
Optical Flow [14.877766449009119]
深層学習に基づくビデオフレーム (VFI) 法は、2つの入力フレーム間の動きを推定することに集中している。
動作ベクトル推定に依存しないマルチインシングルアウト(MISO)に基づくVFI法を提案する。
我々はMISO-VFIがビデオフレーム内のベクトル時間をよりよくキャプチャできる新しい動き知覚損失を導入した。
論文 参考訳(メタデータ) (2023-11-20T08:29:55Z) - Video Frame Interpolation with Densely Queried Bilateral Correlation [52.823751291070906]
Video Frame Interpolation (VFI) は、既存のフレーム間で既存の中間フレームを合成することを目的としている。
フローベースVFIアルゴリズムは、中間運動場を推定し、既存のフレームをワープする。
本稿では,DQBC(Densely Queried Bilateral correlation, DQBC)を提案する。
論文 参考訳(メタデータ) (2023-04-26T14:45:09Z) - Enhanced Bi-directional Motion Estimation for Video Frame Interpolation [0.05541644538483946]
本稿では,動画フレーム推定のための新しいアルゴリズムを提案する。
提案手法は,広い範囲の動画フレームベンチマークにおいて優れた性能を示す。
論文 参考訳(メタデータ) (2022-06-17T06:08:43Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。