論文の概要: PanoTree: Autonomous Photo-Spot Explorer in Virtual Reality Scenes
- arxiv url: http://arxiv.org/abs/2405.17136v2
- Date: Wed, 12 Jun 2024 13:13:10 GMT
- ステータス: 処理完了
- システム内更新日: 2024-06-13 22:05:02.878857
- Title: PanoTree: Autonomous Photo-Spot Explorer in Virtual Reality Scenes
- Title(参考訳): PanoTree:バーチャルリアリティシーンにおける自律的なフォトスポットエクスプローラー
- Authors: Tomohiro Hayase, Sacha Braun, Hikari Yanagawa, Itsuki Orito, Yuichi Hiroi,
- Abstract要約: ソーシャルVRでは、VRシーン内の写真は訪問者の活動を示す重要な指標である。
我々は、VRシーンにおける自動写真スポットエクスプローラーであるPanoTreeを提案する。
ディープスコアリングネットワークは、ソーシャルVRプラットフォームが収集した大量の写真をトレーニングし、人間が同様の写真を撮るかどうかを判断する。
- 参考スコア(独自算出の注目度): 2.4140502941897544
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Social VR platforms enable social, economic, and creative activities by allowing users to create and share their own virtual spaces. In social VR, photography within a VR scene is an important indicator of visitors' activities. Although automatic identification of photo spots within a VR scene can facilitate the process of creating a VR scene and enhance the visitor experience, there are challenges in quantitatively evaluating photos taken in the VR scene and efficiently exploring the large VR scene. We propose PanoTree, an automated photo-spot explorer in VR scenes. To assess the aesthetics of images captured in VR scenes, a deep scoring network is trained on a large dataset of photos collected by a social VR platform to determine whether humans are likely to take similar photos. Furthermore, we propose a Hierarchical Optimistic Optimization (HOO)-based search algorithm to efficiently explore 3D VR spaces with the reward from the scoring network. Our user study shows that the scoring network achieves human-level performance in distinguishing randomly taken images from those taken by humans. In addition, we show applications using the explored photo spots, such as automatic thumbnail generation, support for VR world creation, and visitor flow planning within a VR scene.
- Abstract(参考訳): ソーシャルVRプラットフォームは、ユーザーが自分の仮想空間を作成、共有できるようにすることで、社会的、経済的、創造的な活動を可能にする。
ソーシャルVRでは、VRシーン内の写真は訪問者の活動を示す重要な指標である。
VRシーン内の写真スポットの自動識別は、VRシーンの作成とビジター体験の向上を促進することができるが、VRシーンで撮影された写真を定量的に評価し、大きなVRシーンを効率的に探索することは困難である。
我々は、VRシーンにおける自動写真スポットエクスプローラーであるPanoTreeを提案する。
VRシーンで撮影された画像の美学を評価するために、ソーシャルVRプラットフォームが収集した大量の写真に基づいて、ディープスコアリングネットワークをトレーニングし、人間が同様の写真を撮るかどうかを判断する。
さらに,階層的最適最適化(HOO)に基づく探索アルゴリズムを提案し,評価ネットワークから報酬を得て3次元VR空間を効率的に探索する。
本研究は, ランダムに撮影した画像と人間が撮影した画像とを区別することで, 評価ネットワークが人間レベルの性能を達成することを示すものである。
また,自動サムネイル生成,VRワールド作成のサポート,VRシーン内のビジターフロー計画など,探索された写真スポットを用いたアプリケーションについても紹介する。
関連論文リスト
- Deep Motion Masking for Secure, Usable, and Scalable Real-Time Anonymization of Virtual Reality Motion Data [49.68609500290361]
最近の研究では、ほぼすべてのVRアプリケーションで使われているモーショントラッキングの「テレメトリ」データが、指紋スキャンと同じくらいに識別可能であることが示されている。
本稿では、既知の防御対策を確実に回避できる最先端のVR識別モデルを提案する。
論文 参考訳(メタデータ) (2023-11-09T01:34:22Z) - VR.net: A Real-world Dataset for Virtual Reality Motion Sickness
Research [33.092692299254814]
VR.netは10のジャンルで10の現実世界のゲームから約12時間のゲームプレイビデオを提供するデータセットである。
各ビデオフレームに対して、カメラ/オブジェクト移動、深度場、モーションフローなど、モーション病関連ラベルの豊富なセットを正確に割り当てる。
我々は,VRゲームのソースコードにアクセスすることなく,3Dエンジンのレンダリングパイプラインから地上の真実データを自動的かつ正確に抽出するツールを利用する。
論文 参考訳(メタデータ) (2023-06-06T03:43:11Z) - Towards a Pipeline for Real-Time Visualization of Faces for VR-based
Telepresence and Live Broadcasting Utilizing Neural Rendering [58.720142291102135]
バーチャルリアリティー用のヘッドマウントディスプレイ(HMD)は、VRにおける現実的な対面会話にかなりの障害をもたらす。
本稿では,低コストなハードウェアに焦点をあて,単一のGPUを用いたコモディティゲームコンピュータで使用できるアプローチを提案する。
論文 参考訳(メタデータ) (2023-01-04T08:49:51Z) - Towards 3D VR-Sketch to 3D Shape Retrieval [128.47604316459905]
入力モダリティとしての3Dスケッチの利用について検討し、検索を行うVRシナリオを提唱する。
この新しい3DVR-Sketchから3D形状の検索問題に対する最初のスタンプとして、私たちは4つのコントリビューションを行います。
論文 参考訳(メタデータ) (2022-09-20T22:04:31Z) - Deep Billboards towards Lossless Real2Sim in Virtual Reality [20.7032774699291]
ニューラルネットワークを用いて暗黙的に3Dオブジェクトをモデル化するディープビルボードを開発した。
我々のシステムは、商用VRヘッドセットとニューラルレンダリングを実行するサーバーを接続することで、詳細な剛体物体をリアルタイムに高精度にシミュレーションすることができる。
私たちはDeep Billboardsを物理的なインタラクション能力で強化し、スクリーンベースのゲームから没入型VRに古典的なビルボードを適応させました。
論文 参考訳(メタデータ) (2022-08-08T16:16:29Z) - Wireless Edge-Empowered Metaverse: A Learning-Based Incentive Mechanism
for Virtual Reality [102.4151387131726]
メタバースにおけるVRサービスのための学習型インセンティブメカニズムフレームワークを提案する。
まず,仮想世界におけるVRユーザのための指標として,知覚の質を提案する。
第二に、VRユーザー(買い手)とVR SP(売り手)間のVRサービスの迅速な取引のために、オランダの二重オークション機構を設計する。
第3に,この競売プロセスの高速化を目的とした深層強化学習型競売機を設計する。
論文 参考訳(メタデータ) (2021-11-07T13:02:52Z) - Robust Egocentric Photo-realistic Facial Expression Transfer for Virtual
Reality [68.18446501943585]
ソーシャルな存在は、バーチャルリアリティー(VR)におけるデジタル人間による次世代コミュニケーションシステムを支える
最高の3DビデオリアルVRアバターは、人固有の(PS)モデルに依存します。
本稿では,エンドツーエンドのマルチアイデンティティアーキテクチャを提案することで,これらの制限を克服する。
論文 参考訳(メタデータ) (2021-04-10T15:48:53Z) - Guidelines for the Development of Immersive Virtual Reality Software for
Cognitive Neuroscience and Neuropsychology: The Development of Virtual
Reality Everyday Assessment Lab (VR-EAL) [0.0]
本研究は、認知神経科学および神経心理学におけるVRソフトウェア開発のためのガイドラインを提供する。
20~45歳,12~16歳のフルタイム教育を受けた25名の被験者がVR-EALの様々なバージョンを評価した。
VR-EALの最終バージョンはVRNQのすべてのサブスコアでハイスコアを獲得し、同種のカットオフを上回った。
論文 参考訳(メタデータ) (2021-01-20T14:55:57Z) - Validation of the Virtual Reality Neuroscience Questionnaire: Maximum
Duration of Immersive Virtual Reality Sessions Without the Presence of
Pertinent Adverse Symptomatology [0.0]
VRNQは、ユーザーエクスペリエンス、ゲームメカニクス、ゲーム内アシスト、VRISEの観点からVRソフトウェアの品質を評価するために開発された。
VRセッションの最大時間は、VRソフトウェアがVRNQの類似のカットオフに遭遇または超える55分から70分の間である。
より深い没入感、グラフィックとサウンドの質の向上、ゲーム内命令やプロンプトの改善により、VRISE強度の低減が図られた。
論文 参考訳(メタデータ) (2021-01-20T14:10:44Z) - Unmasking Communication Partners: A Low-Cost AI Solution for Digitally
Removing Head-Mounted Displays in VR-Based Telepresence [62.997667081978825]
バーチャルリアリティ(VR)における対面会話は、被験者がヘッドマウントディスプレイ(HMD)を装着する際の課題である
過去の研究では、高コストハードウェアを用いた実験室環境では、VRで個人用アバターを用いた高忠実な顔再構成が可能であることが示されている。
我々は,オープンソース,フリーソフトウェア,安価なハードウェアのみを利用する,このタスクのための最初の低コストシステムを提案する。
論文 参考訳(メタデータ) (2020-11-06T23:17:12Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。