論文の概要: Projection-Aware End-to-End Learned Video Compression for 360-Degree Video
- arxiv url: http://arxiv.org/abs/2608.28689v1
- Date: Wed, 26 Aug 2026 14:37:03 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-09-01 18:31:30.713939
- Title: Projection-Aware End-to-End Learned Video Compression for 360-Degree Video
- Title(参考訳): 360度映像のプロジェクション・アウェア・エンド・ツー・エンド学習映像圧縮
- Abstract要約: この論文は、プロジェクションフォーマットが360度ビデオのエンドツーエンドのニューラル圧縮にどのように影響するかを考察する。
JVET 360Libでサポートされている7つのフォーマットが評価されている。
その結果, 正方形およびパッド状の正方形突起が最も圧縮効率が高いことがわかった。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: 360-degree video supports immersive applications such as virtual reality, autonomous driving, and education. Because spherical content cannot be processed directly by conventional video codecs, it must first be mapped to a two-dimensional projection. Projection choice affects spatial continuity, sampling uniformity, motion estimation, and compression efficiency. This thesis investigates how projection format influences end-to-end neural compression of 360-degree video. Seven formats supported by JVET 360Lib are evaluated using the scale-space flow model, JVET test sequences, and common test conditions. Each sequence is converted from its source equirectangular projection to a coding projection, compressed at multiple rate points, reconstructed, and converted back. Performance is assessed using PSNR, spherical PSNR, weighted spherical PSNR, and Bjøntegaard delta rate. A differentiable pipeline combining projection conversion, neural compression, and inverse projection is also compared with 360Lib. Results show that equirectangular and padded equirectangular projections provide the highest compression efficiency with the scale-space flow model, while cubemap-based and rhombic dodecahedron projections are less effective. This differs from the conventional HM-16.16 codec, for which cubemap-based formats, particularly equi-angular and adjusted cubemap projections, outperform equirectangular formats. Neural models based on optical flow benefit from the spatial continuity of single-face projections, whereas block-based hybrid codecs better accommodate multi-face layouts. These findings show that projection efficiency is codec-dependent and provide guidance for selecting projections for learning-based 360-degree video compression.
- Abstract(参考訳): 360度ビデオは、仮想現実、自動運転、教育などの没入型アプリケーションをサポートする。
球状コンテンツは従来のビデオコーデックでは直接処理できないため、まず2次元投影にマッピングする必要がある。
投影選択は、空間連続性、サンプリング均一性、運動推定、圧縮効率に影響を与える。
この論文は、プロジェクションフォーマットが360度ビデオのエンドツーエンドのニューラル圧縮にどのように影響するかを考察する。
JVET 360Libがサポートする7つのフォーマットは、スケールスペースフローモデル、JVETテストシーケンス、および一般的なテスト条件を用いて評価される。
各シーケンスは、元の正方形射影から符号化射影に変換され、複数のレートポイントで圧縮され、再構成され、再び変換される。
評価はPSNR, 球状PSNR, 重み付きPSNR, Bjøntegaardデルタレートを用いて行った。
プロジェクション変換、ニューラル圧縮、逆プロジェクションを組み合わせた微分可能なパイプラインも360Libと比較される。
その結果, 正方形およびパッド状等方形突起は, スケール空間流モデルで最大圧縮効率が得られ, 立方体マップベースおよびロンボックドデカヘドロンプロジェクションはより効果的であることがわかった。
これは従来のHM-16.16コーデックと異なり、立方体マップベースのフォーマット、特に等角および調整された立方体マッププロジェクションは等角形式よりも優れている。
光フローに基づくニューラルモデルは単面射影の空間的連続性から恩恵を受ける一方、ブロックベースのハイブリッドコーデックは多面配置に適している。
これらの結果から,プロジェクション効率はコーデックに依存しており,学習による360度ビデオ圧縮のためのプロジェクション選択のためのガイダンスを提供することがわかった。
関連論文リスト
- SVI360: Spherical Video Interpolation [5.168141947651225]
本稿では,バーチャルリアリティや没入型ビデオエンハンスメントといったアプリケーションにおいて重要な役割を担う全方向ビデオの問題に対処する。
既存のビデオ手法は、極に近い厳しい歪みを扱うのが難しいため、球面ビデオには適していない。
本稿では,この歪みに対応するために,画像フレームと回転ビューを組み合わせたデュアルブランチフレームワークであるSVI360を提案する。
論文 参考訳(メタデータ) (2026-07-13T15:37:52Z) - ViPS: Video-informed Pose Spaces for Auto-Rigged Meshes [55.32681167870698]
Video-informed Pose Spaces (ViPS)は、自動リップメッシュのための有効な調律の潜時分布を検出するフィードフォワードフレームワークである。
ViPSは生成ビデオの先行値を所定のリグパラメータ化上の普遍分布に転送する。
評価の結果,VPSは,合成アーティストが作成した4Dデータに基づいて訓練した最先端の手法の性能と,妥当性と多様性の両面で一致していることがわかった。
論文 参考訳(メタデータ) (2026-04-19T21:21:11Z) - Towards Realistic and Consistent Orbital Video Generation via 3D Foundation Priors [61.34273238077091]
本稿では,物体の単一画像からオービタルビデオを生成する新しい手法を提案する。
本手法は,最先端の手法と比較して,視覚的品質,形状リアリズム,多視点整合性を実現している。
論文 参考訳(メタデータ) (2026-04-14T05:35:46Z) - Geometric Transformation-Embedded Mamba for Learned Video Compression [5.89272315125701]
直接変換戦略,すなわち非線形変換,量子化,エントロピー符号化に基づくビデオ圧縮フレームワークを提案する。
提案手法は,低ビットレート制約下での知覚的品質と時間的一貫性の観点から,最先端のビデオ圧縮手法より優れる。
論文 参考訳(メタデータ) (2026-03-09T03:14:07Z) - CubeComposer: Spatio-Temporal Autoregressive 4K 360° Video Generation from Perspective Video [86.80231588752957]
4K解像度の360ビデオを生成する新しい立方体時間自己回帰拡散モデルを提案する。
ビデオを6つの顔で立方体マップ表現に分解することで、CubeComposerは、適切に計画された順序で自動的にコンテンツを合成する。
ベンチマークデータセットの実験では、CubeComposerがネイティブの解像度と視覚的品質で最先端のメソッドより優れていることが示されている。
論文 参考訳(メタデータ) (2026-03-04T17:06:56Z) - Continuous Space-Time Video Super-Resolution with 3D Fourier Fields [62.270473766381976]
連続時空ビデオ超解像のための新しい定式化法を提案する。
モデリング関節は空間的および時間的超解像の両方を大幅に改善することを示す。
論文 参考訳(メタデータ) (2025-09-30T14:34:02Z) - PointVDP: Learning View-Dependent Projection by Fireworks Rays for 3D Point Cloud Segmentation [66.00721801098574]
本稿では,ポイントクラウドのセグメンテーションを容易にするために,ビュー依存プロジェクション(VDP)を提案する。
VDPは3Dポイント分布からデータ駆動プロジェクションを生成する。
フレームワークを最適化するために色規則化を構築します。
論文 参考訳(メタデータ) (2025-07-09T07:44:00Z) - CUBE360: Learning Cubic Field Representation for Monocular 360 Depth Estimation for Virtual Reality [32.023283261191104]
CUBE360は、1つのパノラマ画像から複数のMPIからなる立方体場を学習し、任意の視野方向の深さ推定を行う。
合成と実世界の両方のデータセットの実験は、従来のSSL方式と比較してCUBE360の優れた性能を示している。
論文 参考訳(メタデータ) (2024-10-08T06:52:46Z) - 360VFI: A Dataset and Benchmark for Omnidirectional Video Frame Interpolation [13.122586587748218]
本稿では,Omnidirectional Video Frame Interpolationのためのベンチマークデータセットである360VFIを紹介する。
本稿では,全方向ビデオの歪みをネットワークに導入し,歪みを変調する実用的な実装を提案する。
論文 参考訳(メタデータ) (2024-07-19T06:50:24Z) - Learning Spatial Adaptation and Temporal Coherence in Diffusion Models for Video Super-Resolution [151.1255837803585]
ビデオ超解像のための空間適応と時間コヒーレンス(SATeCo)を追求する新しい手法を提案する。
SATeCoは低解像度ビデオから時空間ガイダンスを学習し、潜時空間高解像度ビデオデノイングとピクセル空間ビデオ再構成の両方を校正する。
REDS4データセットとVid4データセットを用いて行った実験は、我々のアプローチの有効性を実証する。
論文 参考訳(メタデータ) (2024-03-25T17:59:26Z) - Pseudocylindrical Convolutions for Learned Omnidirectional Image
Compression [42.15877732557837]
我々は、全方位画像圧縮のためのディープニューラルネットワークを初めて学習する試みの1つである。
パラメトリック表現に関する合理的な制約の下では、擬円筒的畳み込みは標準畳み込みによって効率的に実装できる。
実験結果から,提案手法は競合手法よりも高い速度歪み性能が得られることがわかった。
論文 参考訳(メタデータ) (2021-12-25T12:18:32Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。