Fugu-MT 論文翻訳(概要): MetaDecorator: Generating Immersive Virtual Tours through Multimodality

論文の概要: MetaDecorator: Generating Immersive Virtual Tours through Multimodality

arxiv url: http://arxiv.org/abs/2501.16164v1
Date: Mon, 27 Jan 2025 15:59:58 GMT
ステータス: 翻訳完了
システム内更新日: 2025-01-28 13:54:25.781469
Title: MetaDecorator: Generating Immersive Virtual Tours through Multimodality
Title（参考訳）: MetaDecorator:マルチモーダルによる没入型仮想ツアーの生成
Authors: Shuang Xie, Yang Liu, Jeannie S. A. Lee, Haiwei Dong,
Abstract要約: MetaDecoratorは仮想空間をパーソナライズするためのフレームワークである。テキスト駆動のプロンプトと画像合成技術を活用することで、MetaDecoratorは360degイメージングデバイスによってキャプチャされた静的パノラマを装飾し、それらをユニークなスタイルで視覚的に魅力的な環境に変換する。
参考スコア（独自算出の注目度）: 4.952351885592028
License:
Abstract: MetaDecorator, is a framework that empowers users to personalize virtual spaces. By leveraging text-driven prompts and image synthesis techniques, MetaDecorator adorns static panoramas captured by 360{\deg} imaging devices, transforming them into uniquely styled and visually appealing environments. This significantly enhances the realism and engagement of virtual tours compared to traditional offerings. Beyond the core framework, we also discuss the integration of Large Language Models (LLMs) and haptics in the VR application to provide a more immersive experience.
Abstract（参考訳）: MetaDecoratorは仮想空間をパーソナライズするためのフレームワークである。テキスト駆動のプロンプトと画像合成技術を活用することで、MetaDecoratorは360{\deg}イメージングデバイスによってキャプチャされた静的パノラマを回避し、それらをユニークなスタイルで視覚的に魅力的な環境に変換する。これにより、従来のツアーに比べてバーチャルツアーのリアリズムとエンゲージメントが大幅に向上する。コアフレームワーク以外にも、より没入的なエクスペリエンスを提供するために、VRアプリケーションにおけるLarge Language Models(LLM)とhapticsの統合についても論じています。

関連論文リスト

MetaDesigner: Advancing Artistic Typography through AI-Driven, User-Centric, and Multilingual WordArt Synthesis [65.78359025027457]
MetaDesignerは、Large Language Models(LLM)の強みを活用して、ユーザエンゲージメントを中心としたデザインパラダイムを推進することによって、芸術的なタイポグラフィに革命をもたらす。総合的なフィードバックメカニズムは、マルチモーダルモデルとユーザ評価からの洞察を活用して、設計プロセスを反復的に洗練し、拡張する。実証的な検証は、MetaDesignerが様々なWordArtアプリケーションに効果的に機能し、審美的に魅力的でコンテキストに敏感な結果を生み出す能力を強調している。
論文参考訳（メタデータ） (2024-06-28T11:58:26Z)
VR-GS: A Physical Dynamics-Aware Interactive Gaussian Splatting System in Virtual Reality [39.53150683721031]
提案するVR-GSシステムは,人間中心の3Dコンテンツインタラクションにおける飛躍的な進歩を示す。私たちの仮想現実システムのコンポーネントは、高い効率と有効性のために設計されています。
論文参考訳（メタデータ） (2024-01-30T01:28:36Z)
Dream360: Diverse and Immersive Outdoor Virtual Scene Creation via Transformer-Based 360 Image Outpainting [33.95741744421632]
本研究では,Dream360と呼ばれる変換器を用いた360度画像出力フレームワークを提案する。ユーザが選択したビューポートから多種多様で高忠実で高解像度のパノラマを生成することができる。私たちのDream360は、既存の方法よりもFrechet Inception Distance(FID)スコアが大幅に低く、視覚的忠実度が向上します。
論文参考訳（メタデータ） (2024-01-19T09:01:20Z)
GPAvatar: Generalizable and Precise Head Avatar from Image(s) [71.555405205039]
GPAvatarは、1つの前方パスで1つまたは複数の画像から3Dヘッドアバターを再構築するフレームワークである。提案手法は,忠実なアイデンティティ再構築,正確な表現制御,多視点一貫性を実現する。
論文参考訳（メタデータ） (2024-01-18T18:56:34Z)
From Audio to Photoreal Embodiment: Synthesizing Humans in Conversations [107.88375243135579]
音声を聴くと、顔、体、手を含む個人に対して、ジェスチャー動作の可能性を複数出力する。ジェスチャーにおいて重要なニュアンスを表現できる高光写実性アバターを用いて生成した動きを可視化する。実験により,本モデルが適切な多様なジェスチャーを生成することを示し,拡散法とVQ法の両方に優れることがわかった。
論文参考訳（メタデータ） (2024-01-03T18:55:16Z)
Let's Give a Voice to Conversational Agents in Virtual Reality [2.7470819871568506]
仮想環境における対話型エージェントの開発を簡略化する目的で,オープンソースアーキテクチャを提案する。没入型ディスプレイとVRヘッドセットの両方のためにUnityで開発されたデジタルヘルスドメインで動作する会話型プロトタイプを2つ提示する。
論文参考訳（メタデータ） (2023-08-04T18:51:38Z)
DynIBaR: Neural Dynamic Image-Based Rendering [79.44655794967741]
複雑な動的シーンを描写したモノクロ映像から新しいビューを合成する問題に対処する。我々は,近傍のビューから特徴を集約することで,新しい視点を合成するボリューム画像ベースのレンダリングフレームワークを採用する。動的シーンデータセットにおける最先端手法の大幅な改善を示す。
論文参考訳（メタデータ） (2022-11-20T20:57:02Z)
HORIZON: High-Resolution Semantically Controlled Panorama Synthesis [105.55531244750019]
パノラマ合成は、仮想世界の中心にユーザーを没入させ、360度の視覚的な風景を再現する。視覚合成の最近の進歩は、2次元平面画像における意味制御の可能性を解き放ったが、これらの手法のパノラマ合成への直接的応用は歪んだ内容を生み出す。我々は,高分解能パノラマを生成するための革新的な枠組みを公表し,洗練された球面モデリングによる球面歪みとエッジ不連続性の問題に着目した。
論文参考訳（メタデータ） (2022-10-10T09:43:26Z)
Drivable Volumetric Avatars using Texel-Aligned Features [52.89305658071045]
光テレプレゼンスは、動的に合成された外観を実現するために、高忠実度ボディモデリングと忠実な運転の両方を必要とする。本稿では,現実人のフルボディアバターをモデリングし,駆動する際の2つの課題に対処するエンドツーエンドフレームワークを提案する。
論文参考訳（メタデータ） (2022-07-20T09:28:16Z)
Keep It Real: a Window to Real Reality in Virtual Reality [13.173307471333619]
仮想空間上に投影された仮想鏡や窓からなる仮想現実感(VR)環境において,新たなインタラクションパラダイムを提案する。このテクニックは、さまざまなビデオ、ライブストリーミングアプリ、拡張現実および仮想現実設定に適用して、インタラクティブで没入的なユーザエクスペリエンスを提供する。
論文参考訳（メタデータ） (2020-04-21T21:33:14Z)

関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。