論文の概要: Sonic Interactions in Virtual Environments: the Egocentric Audio
Perspective of the Digital Twin
- arxiv url: http://arxiv.org/abs/2204.09919v1
- Date: Thu, 21 Apr 2022 07:18:16 GMT
- ステータス: 処理完了
- システム内更新日: 2022-04-22 21:57:57.974841
- Title: Sonic Interactions in Virtual Environments: the Egocentric Audio
Perspective of the Digital Twin
- Title(参考訳): 仮想環境におけるソニックインタラクション:デジタル双生児のエゴセントリックな音声視点
- Authors: Michele Geronazzo and Stefania Serafin
- Abstract要約: 本章は、仮想環境における音素相互作用に関する研究を、聴覚デジタル双生児の自我中心的な視点を備えた研究分野に変換することを目的とする。
このような代理店の保護者は、人間と技術の間の相互作用を促進する聴覚デジタル双生児である。
- 参考スコア(独自算出の注目度): 6.639956135839834
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: The relationships between the listener, physical world and virtual
environment (VE) should not only inspire the design of natural multimodal
interfaces but should be discovered to make sense of the mediating action of VR
technologies. This chapter aims to transform an archipelago of studies related
to sonic interactions in virtual environments (SIVE) into a research field
equipped with a first theoretical framework with an inclusive vision of the
challenges to come: the egocentric perspective of the auditory digital twin. In
a VE with immersive audio technologies implemented, the role of VR simulations
must be enacted by a participatory exploration of sense-making in a network of
human and non-human agents, called actors. The guardian of such locus of agency
is the auditory digital twin that fosters intra-actions between humans and
technology, dynamically and fluidly redefining all those configurations that
are crucial for an immersive and coherent experience. The idea of entanglement
theory is here mainly declined in an egocentric-spatial perspective related to
emerging knowledge of the listener's perceptual capabilities. This is an
actively transformative relation with the digital twin potentials to create
movement, transparency, and provocative activities in VEs. The chapter contains
an original theoretical perspective complemented by several bibliographical
references and links to the other book chapters that have contributed
significantly to the proposal presented here.
- Abstract(参考訳): リスナーと物理世界と仮想環境(VE)の関係は、自然なマルチモーダルインタフェースの設計を刺激するだけでなく、VR技術の仲介行動を理解するためにも発見されるべきである。
本章は,仮想環境(sive)におけるソニックインタラクションに関連する研究の列を,課題を包括する第1の理論的枠組み,すなわち聴覚デジタル双生児の自己中心的視点を備えた研究分野に転換することを目的とする。
没入型オーディオ技術が実装されたveでは、vrシミュレーションの役割はアクタと呼ばれる人間と非人間のエージェントのネットワークにおける感覚形成の参加的探索によって果たさなければならない。
the guardian of such locus of agencyは、聴覚デジタル双生児であり、人間とテクノロジーの間の動作を促進させ、没入的かつコヒーレントな体験に不可欠な全ての構成を動的かつ流動的に再定義する。
絡み合い理論の考え方は、主に聴取者の知覚能力に関する新たな知識に関連する自我中心・空間的な視点で減少している。
これは、vesにおける動き、透明性、挑発的な活動を生み出すために、デジタルツインポテンシャルと積極的に変化する関係である。
この章は、いくつかの書誌的参考文献によって補完された独自の理論的視点と、ここで提示された提案に大きく貢献した他の書籍の章との関係を含んでいる。
関連論文リスト
- VR-GS: A Physical Dynamics-Aware Interactive Gaussian Splatting System
in Virtual Reality [40.70808925128998]
提案するVR-GSシステムは,人間中心の3Dコンテンツインタラクションにおける飛躍的な進歩を示す。
私たちの仮想現実システムのコンポーネントは、高い効率と有効性のために設計されています。
論文 参考訳(メタデータ) (2024-01-30T01:28:36Z) - On the Emergence of Symmetrical Reality [51.21203247240322]
物理仮想アマルガメーションの様々な形態を包含した統一表現を提供する対称現実感フレームワークを導入する。
我々は、対称現実の潜在的な応用を示すAI駆動型アクティブアシストサービスの例を提案する。
論文 参考訳(メタデータ) (2024-01-26T16:09:39Z) - EgoGen: An Egocentric Synthetic Data Generator [55.62633157306507]
EgoGenは新しい合成データジェネレータで、エゴセントリックな知覚タスクのための正確でリッチな地上訓練データを生成することができる。
EgoGenの中心となるのは、仮想人間の自我中心の視覚入力を直接利用して3D環境を感知する、新しい人間のモーション合成モデルである。
我々は、ヘッドマウントカメラのマッピングとローカライゼーション、エゴセントリックカメラトラッキング、エゴセントリックビューからのヒューマンメッシュリカバリの3つのタスクで、EgoGenの有効性を実証する。
論文 参考訳(メタデータ) (2024-01-16T18:55:22Z) - Digital Life Project: Autonomous 3D Characters with Social Intelligence [86.2845109451914]
Digital Life Projectは、言語をユニバーサルメディアとして活用し、自律的な3Dキャラクタを構築するためのフレームワークである。
私たちのフレームワークは、SocioMindとMoMat-MoGenの2つの主要コンポーネントで構成されています。
論文 参考訳(メタデータ) (2023-12-07T18:58:59Z) - Generating Human-Centric Visual Cues for Human-Object Interaction
Detection via Large Vision-Language Models [59.611697856666304]
人-物対検出(Human-object Interaction:HOI)は、人-物対を検出し、その相互作用を予測することを目的とする。
我々はVLMを用いた3つのプロンプトを提案し、人間の複数の視点から画像内で人間中心の視覚的手がかりを生成する。
我々は,マルチトワーアーキテクチャを用いたトランスフォーマーベースのマルチモーダル融合モジュールを開発し,視覚的キュー機能をインスタンスと対話デコーダに統合する。
論文 参考訳(メタデータ) (2023-11-26T09:11:32Z) - Narrator: Towards Natural Control of Human-Scene Interaction Generation
via Relationship Reasoning [34.00107506891627]
テキスト記述から現実的で多様なHSIを自然かつ制御的に生成することに焦点を当てる。
本研究では,新たな関係推論に基づく生成手法であるNarratorを提案する。
我々の実験と知覚学的研究は、Narratorが様々な相互作用を制御可能であり、既存の作品よりもはるかに優れていることを示している。
論文 参考訳(メタデータ) (2023-03-16T15:44:15Z) - Artificial Intelligence for the Metaverse: A Survey [66.57225253532748]
まず、機械学習アルゴリズムやディープラーニングアーキテクチャを含むAIの予備と、メタバースにおけるその役割について紹介する。
次に、メタバースの可能性を秘めた6つの技術的側面に関するAIベースの手法に関する包括的調査を行う。
医療、製造業、スマートシティ、ゲームなどのAI支援アプリケーションは、仮想世界に展開するために研究されている。
論文 参考訳(メタデータ) (2022-02-15T03:34:56Z) - ThreeDWorld: A Platform for Interactive Multi-Modal Physical Simulation [75.0278287071591]
ThreeDWorld (TDW) はインタラクティブなマルチモーダル物理シミュレーションのためのプラットフォームである。
TDWは、リッチな3D環境において、高忠実な感覚データのシミュレーションと、移動体エージェントとオブジェクト間の物理的相互作用を可能にする。
我々は、コンピュータビジョン、機械学習、認知科学における新たな研究方向において、TDWによって実現された初期実験を提示する。
論文 参考訳(メタデータ) (2020-07-09T17:33:27Z) - Towards hybrid primary intersubjectivity: a neural robotics library for
human science [4.232614032390374]
主観的主観的主観的主観的主観的主観的主観的主観的主観的主観的主観的主観的主観的主観的主観的主観的主観的主観的主観的主観的主観的主観的主観的主観的主観的主観的主観的主観
本研究では,人-ロボットインタラクション実験のためのオープンソース手法であるテクスチュラルロボティクスライブラリ(NRL)を提案する。
人-ロボット間(ハイブリッド)が人間の科学研究に寄与する方法について論じる。
論文 参考訳(メタデータ) (2020-06-29T11:35:46Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。