論文の概要: SoLAR: Error-Resilient Streamable Long-Horizon Free-Viewpoint Video Reconstruction with Anchor Activation and Latent Recalibration
- arxiv url: http://arxiv.org/abs/2605.07346v1
- Date: Fri, 08 May 2026 06:48:59 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-05-11 19:43:38.873734
- Title: SoLAR: Error-Resilient Streamable Long-Horizon Free-Viewpoint Video Reconstruction with Anchor Activation and Latent Recalibration
- Title(参考訳): SoLAR: アンカーアクティベーションと潜時再校正を併用した, 弾力性・弾力性を有する長視点自由視点ビデオ再構成
- Authors: Haotian Zhang, Xu Mo, Yixin Yu, Guanhua Zhu, Jian Xue, Tongda Xu, Yan Wang, Jiaqi Zhang, Siwei Ma, Wen Gao,
- Abstract要約: ビット割り当て理論により、速度歪み最適化フレームワーク内で動的アンカーベースのボリュームビデオ表現を解析する。
我々は,長いシーケンスの復元品質を安定的に維持する,エラー回復性の最初のFVVフレームワークである textbfSoLAR を提案する。
- 参考スコア(独自算出の注目度): 57.159190580279585
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Free-Viewpoint Video (FVV) has emerged as a cornerstone of next-generation immersive media systems and attracted widespread attention. Previous methods primarily focus on short video sequences and suffer from significant performance degradation when processing long-horizon free-viewpoint video (LFVV). Motivated by bit allocation theory, we analyze dynamic-anchor-based volumetric video representation within a rate-distortion optimization framework and propose \textbf{SoLAR}, which is the first error-resilient streamable FVV framework that maintains stable reconstruction quality on long sequences without requiring group-of-pictures partitioning. We propose the Anchor Activation Dynamics (AAD), which enables dynamic anchors to model non-rigid transformations by dynamically activating informative anchors and suppressing redundant ones. Furthermore, we introduce Latent Discrepancy Aware Recalibration (LaDAR), which is a mechanism to identify discrepancies between latent representations and recalibrate the correspondences encoded in the network, effectively mitigating error propagation in LFVV without compromising real-time performance or storage compactness. Extensive experiments demonstrate that \textbf{SoLAR} achieves state-of-the-art reconstruction performance while maintaining minimum storage overhead, which provides a new direction for LFVV reconstruction and advances the practical deployment of immersive systems. Demo free-viewpoint videos are provided in the supplementary material.
- Abstract(参考訳): 次世代没入型メディアシステムの基盤としてFVV(Free-Viewpoint Video)が登場し、広く注目を集めている。
従来の手法は主に短いビデオシーケンスに重点を置いており、長い水平自由視点ビデオ(LFVV)を処理する際に大きな性能劣化に悩まされていた。
ビット割り当て理論により,レート歪み最適化フレームワーク内での動的アンカーベースのボリュームビデオ表現を解析し,グループ・オブ・ピクチャ分割を必要とせず,長いシーケンス上で安定した再構成品質を維持する最初のエラー回復型ストリーム可能なFVVフレームワークである \textbf{SoLAR} を提案する。
本稿では,情報アンカーの動的活性化と冗長なアンカーの抑制により,動的アンカーが非剛体変換をモデル化できるアンカーアクティベーションダイナミクス(AAD)を提案する。
さらに,潜時表現間の不一致を識別し,ネットワークに符号化された対応を校正する機構であるLaDAR(Latent Discrepancy Aware Recalibration)を導入し,実時間性能や記憶容量のコンパクトさを損なうことなく,LFVVにおける誤りの伝播を効果的に軽減する。
大規模実験により, LFVV再生の新たな方向性を提供し, 没入型システムの実用的展開を推し進めるとともに, 最小限のストレージオーバーヘッドを維持しながら, 最先端の再構築性能を実現することが実証された。
補足資料にはデモ自由視点ビデオが提供されている。
関連論文リスト
- Low-Light Video Enhancement with An Effective Spatial-Temporal Decomposition Paradigm [41.22349903137354]
低照度ビデオエンハンスメント(LLVE)は、激しい視認性とノイズに悩まされる動的または静的なシーンの復元を目指している。
本稿では、ビューに依存しない、ビューに依存しないコンポーネントを組み込んだ革新的なビデオ分解戦略を提案する。
論文 参考訳(メタデータ) (2026-02-09T14:15:47Z) - DiTVR: Zero-Shot Diffusion Transformer for Video Restoration [48.97196894658511]
DiTVRはゼロショットビデオ復元フレームワークで、拡散トランスフォーマーと軌跡を意識した注意と流れ一貫したサンプルを結合する。
我々の注意機構は、光流路に沿ってトークンを整列させ、特に時間力学に最も敏感な重要な層に重点を置いている。
フローガイドされたサンプリング装置は、低周波帯域にのみデータの一貫性を注入し、キャッシュを加速させながら高周波事前保存を行う。
論文 参考訳(メタデータ) (2025-08-11T09:54:45Z) - FANeRV: Frequency Separation and Augmentation based Neural Representation for Video [32.35716293561769]
ビデオのための周波数分離と拡張に基づくニューラル表現(FANeRV)を提案する。
FANeRVは離散ウェーブレット変換を用いて入力フレームを高周波数成分と低周波数成分に明示的に分離する。
特別に設計されたゲートネットワークは、これらの周波数成分を効果的に融合して最適な再構成を行う。
論文 参考訳(メタデータ) (2025-04-09T10:19:35Z) - Low-Light Video Enhancement via Spatial-Temporal Consistent Decomposition [52.89441679581216]
低照度ビデオエンハンスメント(LLVE)は、激しい視認性とノイズに悩まされる動的または静的なシーンの復元を目指している。
本稿では、ビューに依存しない、ビューに依存しないコンポーネントを組み込んだ革新的なビデオ分解戦略を提案する。
我々のフレームワークは、既存のメソッドを一貫して上回り、新しいSOTAパフォーマンスを確立します。
論文 参考訳(メタデータ) (2024-05-24T15:56:40Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。