論文の概要: OpenSAL360: Open-Source Crowdsourcing Platform for Omnidirectional Video Saliency Collection
- arxiv url: http://arxiv.org/abs/2609.21480v1
- Date: Fri, 18 Sep 2026 08:29:09 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-09-21 18:40:16.933231
- Title: OpenSAL360: Open-Source Crowdsourcing Platform for Omnidirectional Video Saliency Collection
- Title(参考訳): OpenSAL360: 全方位ビデオソーシングのためのオープンソースクラウドソーシングプラットフォーム
- Abstract要約: OpenSAL360は、スケーラブルで低コストな360度ビデオサリエンシ収集のための、最初のオープンソースプラットフォームです。
従来のVRベースのプロトコルとは異なり、標準のスクリーン、マウス、インターネット接続しか必要としない。
2,000人以上のクラウドソーシングアセスタがアノテートした500本の全方位ビデオをカバーするサリエンシデータセットをリリースする。
- 参考スコア(独自算出の注目度): 1.0753251033242444
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Omnidirectional video saliency prediction plays an important role in many immersive multimedia applications, including viewport-adaptive streaming and compression, foveated rendering, mesh simplification, perceptual quality assessment. Yet progress in this area remains constrained by the cost and complexity of collecting eye-tracking data with VR headsets, which makes large-scale dataset creation difficult to extend. We present OpenSAL360, the first open-source platform for scalable, low-cost 360° video saliency collection. Unlike conventional VR-based protocols, it requires only a standard screen, mouse, and internet connection, enabling parallel saliency data collection from common crowdsourcing assessors without specialized hardware. We validate our collection protocol against seven well-established VR eye-tracking datasets and conduct ablation studies on key interface, pre-, and post-processing parameters. To demonstrate the effectiveness and scalability of the proposed methodology, we collect and publicly release a saliency dataset covering 500 omnidirectional videos annotated by 2,000+ crowdsourcing assessors, making it, to the best of our knowledge, the largest dataset in this field. We make OpenSAL360 publicly available at https://github.com/msu-video-group/OpenSAL360.
- Abstract(参考訳): 没入型マルチメディアアプリケーションでは,ビューポート適応型ストリーミングや圧縮,フェーベレートレンダリング,メッシュ単純化,知覚品質評価など,全方位ビデオサリエンシ予測が重要な役割を担っている。
しかし、この分野の進歩は、VRヘッドセットで視線追跡データを収集するコストと複雑さに制約されているため、大規模なデータセットの作成が困難になる。
OpenSAL360は、スケーラブルで低コストな360度ビデオサリエンシ収集のための、最初のオープンソースプラットフォームです。
従来のVRベースのプロトコルとは異なり、標準的なスクリーン、マウス、インターネット接続しか必要とせず、特別なハードウェアを使わずに一般的なクラウドソーシングアセスメントアセスメントから並列サプライアンスデータを収集できる。
収集プロトコルを、確立された7つのVRアイトラッキングデータセットに対して検証し、キーインターフェース、プリプロセスおよび後処理パラメータに関するアブレーション研究を行う。
提案手法の有効性とスケーラビリティを実証するため,2000人以上のクラウドソーシングアセスタによって注釈付けされた500本の全方位ビデオを対象としたサリエンシデータセットを収集,公開し,私たちの知る限り,この分野で最大のデータセットとなるようにした。
OpenSAL360をhttps://github.com/msu-video-group/OpenSAL360で公開しています。
関連論文リスト
- Spherical Vision Transformers for Audio-Visual Saliency Prediction in 360-Degree Videos [15.59763872743732]
本研究では, 球面歪みの複雑さと空間音声の統合に対処するため, 塩分濃度予測の領域を360度環境まで拡張する。
この研究は、360度オーディオ・ビジュアル・サリエンシ予測のための包括的なデータセットが欠如していることから、81ODVの新しいデータセットであるYT360-EyeTrackingをキュレートする。
私たちのゴールは、360度ビデオの視覚的サリエンシを効果的に予測するために、オーディオ・ビジュアル・キューを利用する方法を探ることです。
論文 参考訳(メタデータ) (2025-08-27T19:01:47Z) - OmniAudio: Generating Spatial Audio from 360-Degree Video [91.56286471271513]
我々は,360度ビデオから空間音声を生成する新しいタスクである360V2SAを導入する。
本稿では,空間音声データと大規模非空間データの両方を用いて,自己教師付き事前学習を利用する新しいフレームワークOmniAudioを提案する。
実験により、OmniAudioは客観的指標と主観的指標の両方で最先端のパフォーマンスを達成することが示された。
論文 参考訳(メタデータ) (2025-04-21T07:21:28Z) - OpenFly: A Comprehensive Platform for Aerial Vision-Language Navigation [49.697035403548966]
Vision-Language Navigation (VLN)は、言語命令と視覚的手がかりを活用してエージェントを誘導することを目的としており、AIの具体化において重要な役割を果たす。
各種レンダリングエンジン,多用途ツールチェーン,航空VLNの大規模ベンチマークからなるプラットフォームであるOpenFlyを提案する。
我々は、100kの軌跡を持つ大規模な航空VLNデータセットを構築し、18のシーンにまたがる様々な高さと長さをカバーした。
論文 参考訳(メタデータ) (2025-02-25T09:57:18Z) - 360VOTS: Visual Object Tracking and Segmentation in Omnidirectional Videos [16.372814014632944]
我々は全方向ビデオオブジェクトセグメンテーション(360VOS)と呼ばれる新しいコンポーネントを組み込んだ包括的なデータセットとベンチマークを提案する。
360VOSデータセットは、高密度のピクセルワイドマスクを伴い、290のシーケンスを含み、幅広いターゲットカテゴリをカバーする。
我々は最先端のアプローチをベンチマークし、提案した360度トラッキングフレームワークとトレーニングデータセットの有効性を実証する。
論文 参考訳(メタデータ) (2024-04-22T07:54:53Z) - SHD360: A Benchmark Dataset for Salient Human Detection in 360{\deg}
Videos [26.263614207849276]
実写シーンを収集する360度ビデオSHDデータセットSHD360を提案する。
SHD360には16,238の有能な人間の実例があり、手動で注釈付けされたピクセル単位の地上真実がある。
提案したデータセットとベンチマークは,360度パノラマデータに向けた人間中心の研究の出発点となる可能性がある。
論文 参考訳(メタデータ) (2021-05-24T23:51:29Z) - ATSal: An Attention Based Architecture for Saliency Prediction in 360
Videos [5.831115928056554]
本稿では,360度ビデオの注目度に基づく新しいサリエンシモデルであるATSalを提案する。
提案したアプローチを,Salient360!とVR-EyeTrackingという2つのデータセット上で,最先端のSaliencyモデルと比較する。
80以上のODVビデオ(75K以上のフレーム)の実験結果から,提案手法は既存の最先端技術よりも優れていた。
論文 参考訳(メタデータ) (2020-11-20T19:19:48Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。