論文の概要: Sonic Interactions in Virtual Environments: the Egocentric Audio
Perspective of the Digital Twin
- arxiv url: http://arxiv.org/abs/2204.09919v1
- Date: Thu, 21 Apr 2022 07:18:16 GMT
- ステータス: 処理完了
- システム内更新日: 2022-04-22 21:57:57.974841
- Title: Sonic Interactions in Virtual Environments: the Egocentric Audio
Perspective of the Digital Twin
- Title（参考訳）: 仮想環境におけるソニックインタラクション:デジタル双生児のエゴセントリックな音声視点
- Authors: Michele Geronazzo and Stefania Serafin
- Abstract要約: 本章は、仮想環境における音素相互作用に関する研究を、聴覚デジタル双生児の自我中心的な視点を備えた研究分野に変換することを目的とする。
このような代理店の保護者は、人間と技術の間の相互作用を促進する聴覚デジタル双生児である。
- 参考スコア（独自算出の注目度）: 6.639956135839834
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: The relationships between the listener, physical world and virtual
environment (VE) should not only inspire the design of natural multimodal
interfaces but should be discovered to make sense of the mediating action of VR
technologies. This chapter aims to transform an archipelago of studies related
to sonic interactions in virtual environments (SIVE) into a research field
equipped with a first theoretical framework with an inclusive vision of the
challenges to come: the egocentric perspective of the auditory digital twin. In
a VE with immersive audio technologies implemented, the role of VR simulations
must be enacted by a participatory exploration of sense-making in a network of
human and non-human agents, called actors. The guardian of such locus of agency
is the auditory digital twin that fosters intra-actions between humans and
technology, dynamically and fluidly redefining all those configurations that
are crucial for an immersive and coherent experience. The idea of entanglement
theory is here mainly declined in an egocentric-spatial perspective related to
emerging knowledge of the listener's perceptual capabilities. This is an
actively transformative relation with the digital twin potentials to create
movement, transparency, and provocative activities in VEs. The chapter contains
an original theoretical perspective complemented by several bibliographical
references and links to the other book chapters that have contributed
significantly to the proposal presented here.
- Abstract（参考訳）: リスナーと物理世界と仮想環境(VE)の関係は、自然なマルチモーダルインタフェースの設計を刺激するだけでなく、VR技術の仲介行動を理解するためにも発見されるべきである。
本章は,仮想環境(sive)におけるソニックインタラクションに関連する研究の列を,課題を包括する第1の理論的枠組み,すなわち聴覚デジタル双生児の自己中心的視点を備えた研究分野に転換することを目的とする。
没入型オーディオ技術が実装されたveでは、vrシミュレーションの役割はアクタと呼ばれる人間と非人間のエージェントのネットワークにおける感覚形成の参加的探索によって果たさなければならない。
the guardian of such locus of agencyは、聴覚デジタル双生児であり、人間とテクノロジーの間の動作を促進させ、没入的かつコヒーレントな体験に不可欠な全ての構成を動的かつ流動的に再定義する。
絡み合い理論の考え方は、主に聴取者の知覚能力に関する新たな知識に関連する自我中心・空間的な視点で減少している。
これは、vesにおける動き、透明性、挑発的な活動を生み出すために、デジタルツインポテンシャルと積極的に変化する関係である。
この章は、いくつかの書誌的参考文献によって補完された独自の理論的視点と、ここで提示された提案に大きく貢献した他の書籍の章との関係を含んでいる。
関連論文リスト
- Haptic Repurposing with GenAI [5.424247121310253]
Mixed Realityは、デジタル世界と物理的な世界を融合して、没入型人間とコンピュータのインタラクションを作ることを目指している。
本稿では,Haptic Repurposing with GenAIを紹介し,任意の物理オブジェクトをAI生成仮想アセットの適応型触覚インターフェースに変換することによってMRインタラクションを強化する革新的なアプローチを提案する。
論文 参考訳（メタデータ） (2024-06-11T13:06:28Z) - Generative AI for Immersive Communication: The Next Frontier in Internet-of-Senses Through 6G [37.09299562399439]
感覚のインターネット(Internet of Senses, IoS)は、多感覚体験を提供することを目指しており、私たちの物理的現実において、私たちの知覚は単なる視覚と音以上のものであることを認識している。
本稿では,没入型マルチ感覚メディアを駆動する既存の技術について考察し,その能力と応用の可能性について考察する。
論文 参考訳（メタデータ） (2024-04-02T07:57:05Z) - On the Emergence of Symmetrical Reality [51.21203247240322]
物理仮想アマルガメーションの様々な形態を包含した統一表現を提供する対称現実感フレームワークを導入する。
我々は、対称現実の潜在的な応用を示すAI駆動型アクティブアシストサービスの例を提案する。
論文 参考訳（メタデータ） (2024-01-26T16:09:39Z) - EgoGen: An Egocentric Synthetic Data Generator [53.32942235801499]
EgoGenは新しい合成データジェネレータで、エゴセントリックな知覚タスクのための正確でリッチな地上訓練データを生成することができる。
EgoGenの中心となるのは、仮想人間の自我中心の視覚入力を直接利用して3D環境を感知する、新しい人間のモーション合成モデルである。
我々は、ヘッドマウントカメラのマッピングとローカライゼーション、エゴセントリックカメラトラッキング、エゴセントリックビューからのヒューマンメッシュリカバリの3つのタスクで、EgoGenの有効性を実証する。
論文 参考訳（メタデータ） (2024-01-16T18:55:22Z) - Digital Life Project: Autonomous 3D Characters with Social Intelligence [86.2845109451914]
Digital Life Projectは、言語をユニバーサルメディアとして活用し、自律的な3Dキャラクタを構築するためのフレームワークである。
私たちのフレームワークは、SocioMindとMoMat-MoGenの2つの主要コンポーネントで構成されています。
論文 参考訳（メタデータ） (2023-12-07T18:58:59Z) - The Seven Worlds and Experiences of the Wireless Metaverse: Challenges
and Opportunities [58.42198877478623]
ワイヤレスメタバースは、物理的、デジタル、仮想世界の交差点で多様なユーザー体験を生み出す。
我々は、メタバースを7つの世界と経験の交叉に蒸留する、無限の無線メタバースの全体像を提示する。
我々は、DTのエンドツーエンド同期の必要性と、認知アバターにおける人間レベルのAIと推論能力の役割を強調した。
論文 参考訳（メタデータ） (2023-04-20T13:04:52Z) - Narrator: Towards Natural Control of Human-Scene Interaction Generation
via Relationship Reasoning [34.00107506891627]
テキスト記述から現実的で多様なHSIを自然かつ制御的に生成することに焦点を当てる。
本研究では,新たな関係推論に基づく生成手法であるNarratorを提案する。
我々の実験と知覚学的研究は、Narratorが様々な相互作用を制御可能であり、既存の作品よりもはるかに優れていることを示している。
論文 参考訳（メタデータ） (2023-03-16T15:44:15Z) - Artificial Intelligence for the Metaverse: A Survey [66.57225253532748]
まず、機械学習アルゴリズムやディープラーニングアーキテクチャを含むAIの予備と、メタバースにおけるその役割について紹介する。
次に、メタバースの可能性を秘めた6つの技術的側面に関するAIベースの手法に関する包括的調査を行う。
医療、製造業、スマートシティ、ゲームなどのAI支援アプリケーションは、仮想世界に展開するために研究されている。
論文 参考訳（メタデータ） (2022-02-15T03:34:56Z) - ThreeDWorld: A Platform for Interactive Multi-Modal Physical Simulation [75.0278287071591]
ThreeDWorld (TDW) はインタラクティブなマルチモーダル物理シミュレーションのためのプラットフォームである。
TDWは、リッチな3D環境において、高忠実な感覚データのシミュレーションと、移動体エージェントとオブジェクト間の物理的相互作用を可能にする。
我々は、コンピュータビジョン、機械学習、認知科学における新たな研究方向において、TDWによって実現された初期実験を提示する。
論文 参考訳（メタデータ） (2020-07-09T17:33:27Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。