論文の概要: Cinematic-L1 Video Stabilization with a Log-Homography Model
- arxiv url: http://arxiv.org/abs/2011.08144v2
- Date: Fri, 20 Nov 2020 19:14:09 GMT
- ステータス: 処理完了
- システム内更新日: 2022-09-25 00:31:49.574396
- Title: Cinematic-L1 Video Stabilization with a Log-Homography Model
- Title(参考訳): ログホログラフィモデルによるシネマティックl1映像安定化
- Authors: Arwen Bradley, Jason Klivington, Joseph Triscari, Rudolph van der
Merwe
- Abstract要約: 撮影者が撮影するカメラの動きを、三脚、人形、ステアディカムなどの装置でシミュレートする手持ちビデオの安定化方法を提案する。
提案手法は,iPhone XS上で300fpsで動作する計算効率が高く,高品質な結果が得られる。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We present a method for stabilizing handheld video that simulates the camera
motions cinematographers achieve with equipment like tripods, dollies, and
Steadicams. We formulate a constrained convex optimization problem minimizing
the $\ell_1$-norm of the first three derivatives of the stabilized motion. Our
approach extends the work of Grundmann et al. [9] by solving with full
homographies (rather than affinities) in order to correct perspective,
preserving linearity by working in log-homography space. We also construct crop
constraints that preserve field-of-view; model the problem as a quadratic
(rather than linear) program to allow for an $\ell_2$ term encouraging fidelity
to the original trajectory; and add constraints and objectives to reduce
distortion. Furthermore, we propose new methods for handling salient objects
via both inclusion constraints and centering objectives. Finally, we describe a
windowing strategy to approximate the solution in linear time and bounded
memory. Our method is computationally efficient, running at 300fps on an iPhone
XS, and yields high-quality results, as we demonstrate with a collection of
stabilized videos, quantitative and qualitative comparisons to [9] and other
methods, and an ablation study.
- Abstract(参考訳): 撮影者が撮影するカメラの動きを三脚、人形、ステアディカムなどの装置でシミュレートする手持ち動画の安定化手法を提案する。
安定運動の最初の3つの微分の$\ell_1$-normを最小化する制約付き凸最適化問題を定式化する。
私たちのアプローチはgrundmann氏らの仕事を拡張します。
[9]全ホモグラフィーを(親和性ではなく)解いて視点を正し、対数ホモグラフィ空間で作業することで線形性を保つ。
また、視野を保った作物の制約を構築し、元の軌道に忠実さを奨励する$\ell_2$項を許容する二次的(線形ではなく)プログラムとして問題をモデル化し、歪みを減らすために制約と目的を加える。
さらに,包括的制約と中心的目的の両方を通して,サルエントオブジェクトを扱う新しい手法を提案する。
最後に、線形時間と有界メモリで解を近似するウィンドウ化戦略について述べる。
本手法は,iphone xs上で300fpsで動作し,安定ビデオの収集,[9]や他の手法との定量的・質的比較,アブレーション研究等により,高品質な結果が得られる。
関連論文リスト
- Trust-Region Sequential Quadratic Programming for Stochastic Optimization with Random Models [57.52124921268249]
本稿では,1次と2次の両方の定常点を見つけるための信頼逐次準計画法を提案する。
本手法は, 1次定常点に収束するため, 対象対象の近似を最小化して定義された各イテレーションの勾配ステップを計算する。
2階定常点に収束するため,本手法は負曲率を減少するヘッセン行列を探索する固有ステップも計算する。
論文 参考訳(メタデータ) (2024-09-24T04:39:47Z) - Vanishing Point Estimation in Uncalibrated Images with Prior Gravity
Direction [82.72686460985297]
我々はマンハッタンのフレームを推定する問題に取り組む。
2つの新しい2行解法が導出され、そのうちの1つは既存の解法に影響を与える特異点に悩まされない。
また、局所最適化の性能を高めるために、任意の行で実行される新しい最小でないメソッドを設計する。
論文 参考訳(メタデータ) (2023-08-21T13:03:25Z) - Fast Full-frame Video Stabilization with Iterative Optimization [21.962533235492625]
ビデオ安定化のための合成データセットを用いた反復的最適化に基づく学習手法を提案する。
確率的流れ場に基づく2レベル(粗粒度)安定化アルゴリズムを開発した。
そこで本研究では,分割コンカレントアプローチを採用し,フルフレーム安定化ビューをレンダリングするための新しいマルチフレーム融合戦略を提案する。
論文 参考訳(メタデータ) (2023-07-24T13:24:19Z) - Towards Nonlinear-Motion-Aware and Occlusion-Robust Rolling Shutter
Correction [54.00007868515432]
既存の手法では、一様速度仮定による補正の精度を推定する上で、課題に直面している。
本稿では,個々の画素の高次補正場を正確に推定する,幾何的回転シャッター(QRS)運動解法を提案する。
提案手法は,Carla-RS,Fastec-RS,BS-RSCの各データセット上で,PSNRの+4.98,+0.77,+4.33を超える。
論文 参考訳(メタデータ) (2023-03-31T15:09:18Z) - Robust Camera Pose Refinement for Multi-Resolution Hash Encoding [19.655282240361835]
ニューラルレンダリングの計算コストを削減するため,マルチレゾリューションハッシュ符号化が提案されている。
カメラのポーズを校正し、効率的なマルチ解像度ハッシュ符号化を用いて幾何学的表現を学習するための共同最適化アルゴリズムを提案する。
論文 参考訳(メタデータ) (2023-02-03T06:49:27Z) - Minimum Latency Deep Online Video Stabilization [77.68990069996939]
本稿では,オンラインビデオ安定化作業のための新しいカメラパス最適化フレームワークを提案する。
本研究では,近年の市販の高品位深度モーションモデルを用いて動き推定を行い,カメラの軌道を復元する。
我々の手法は、定性的にも量的にも最先端のオンライン手法を大きく上回っている。
論文 参考訳(メタデータ) (2022-12-05T07:37:32Z) - Towards Interpretable Video Super-Resolution via Alternating
Optimization [115.85296325037565]
低フレームのぼかしビデオから高フレームの高解像度のシャープビデオを生成することを目的とした実時間ビデオ超解法(STVSR)問題について検討する。
本稿では,モデルベースと学習ベースの両方の手法を用いて,解釈可能なSTVSRフレームワークを提案する。
論文 参考訳(メタデータ) (2022-07-21T21:34:05Z) - Neural Re-rendering for Full-frame Video Stabilization [144.9918806873405]
まず,高密度ワープ場を推定し,フルフレーム映像安定化のためのアルゴリズムを提案する。
フルフレーム安定化フレームは、隣接するフレームから歪んだコンテンツを融合することで合成することができる。
論文 参考訳(メタデータ) (2021-02-11T18:59:45Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。