論文の概要: Virtual Avatar Stream: a cost-down approach to the Metaverse experience

• arxiv url: http://arxiv.org/abs/2304.01443v1
• Date: Tue, 4 Apr 2023 01:34:23 GMT
• ステータス: 処理完了
• システム内更新日: 2023-04-05 15:51:17.967052
• Title: Virtual Avatar Stream: a cost-down approach to the Metaverse experience
• Title（参考訳）: 仮想アバターストリーム:メタバース体験へのコストダウンアプローチ
• Authors: Joseph Chang
• Abstract要約: このプロジェクトの目的は、Web技術を活用した没入型メタバース体験へのアクセス可能なエントリポイントを提供することである。 開発したプラットフォームでは、Webブラウザ、マイク、ウェブカメラのみを使用してレンダリングされたアバターを利用できるようになる。
• 参考スコア（独自算出の注目度）: 0.0
• License: http://creativecommons.org/licenses/by/4.0/
• Abstract: The Metaverse through VR headsets is a rapidly growing concept, but the high cost of entry currently limits access for many users. This project aims to provide an accessible entry point to the immersive Metaverse experience by leveraging web technologies. The platform developed allows users to engage with rendered avatars using only a web browser, microphone, and webcam. By employing the WebGL and MediaPipe face tracking AI model from Google, the application generates real-time 3D face meshes for users. It uses a client-to-client streaming cluster to establish a connection, and clients negotiate SRTP protocol through WebRTC for direct data streaming. Additionally, the project addresses backend challenges through an architecture that is serverless, distributive, auto-scaling, highly resilient, and secure. The platform offers a scalable, hardware-free solution for users to experience a near-immersive Metaverse, with the potential for future integration with game server clusters. This project provides an important step toward a more inclusive Metaverse accessible to a wider audience.
• Abstract（参考訳）: MetaverseのVRヘッドセットは、急速に普及しているコンセプトだが、現在、多くのユーザーへのアクセスが制限されている。 このプロジェクトの目的は、Web技術を活用した没入型メタバース体験へのアクセス可能なエントリポイントを提供することである。 開発したプラットフォームでは、Webブラウザ、マイク、ウェブカメラのみを使用してレンダリングされたアバターを利用できるようになる。 GoogleからWebGLとMediaPipeのフェイストラッキングAIモデルを採用することで、ユーザはリアルタイムの3Dフェイスメッシュを生成できる。 接続を確立するためにクライアントからクライアントへのストリーミングクラスタを使用し、クライアントはWebRTCを通じてSRTPプロトコルと直接データストリーミングを交渉する。 さらにプロジェクトは、サーバレス、分散、自動スケーリング、高レジリエント、セキュアなアーキテクチャを通じて、バックエンドの課題に対処する。 このプラットフォームは、ユーザがほぼ没入的なメタバースを体験できるスケーラブルでハードウェアフリーなソリューションを提供する。 このプロジェクトは、より広いオーディエンスがアクセス可能なより包括的なメタバースへの重要なステップを提供する。

関連論文リスト

• An Open, Cross-Platform, Web-Based Metaverse Using WebXR and A-Frame [0.0]
  本研究では,空間Webアプリを開発するためのWebXRベースのクロスプラットフォームアーキテクチャを提案する。 これは、Tim Berners-Lee氏のWorld Wide Webというビジョンを、地理的および技術的な境界を超えたオープンなプラットフォームとして生きています。
  論文  参考訳（メタデータ） (2024-08-24T08:47:09Z)
• Vision-based Semantic Communications for Metaverse Services: A Contest Theoretic Approach [66.10465001046762]
  Metaverseでは、アバターを更新し、ユーザの振る舞いを反映してレンダリングする必要がある。 ユーザとMPP間のインタラクションをモデル化する意味コミュニケーションフレームワークを提案する。 我々はセマンティック通信技術を用いて送信するデータの量を削減する。
  論文  参考訳（メタデータ） (2023-08-15T07:56:33Z)
• Virtual Reality in Metaverse over Wireless Networks with User-centered Deep Reinforcement Learning [8.513938423514636]
  無線通信シナリオ上でのマルチユーザVR計算のオフロードについて紹介する。 さらに, ユーザ中心の深層強化学習手法を考案し, ほぼ最適解を求める。
  論文  参考訳（メタデータ） (2023-03-08T03:10:41Z)
• User-centric Heterogeneous-action Deep Reinforcement Learning for Virtual Reality in the Metaverse over Wireless Networks [8.513938423514636]
  本稿では,Metaverseサーバと複数のVRユーザで構成されるシステムについて考察する。 MetaverseのマルチユーザーVRシナリオでは、ユーザはFPS(Frames Per Second)の異なる特性と要求を持っている。 提案したユーザ中心型DRLアルゴリズムは、ユーザ中心型Critic with Heterogenous Actors (UCHA) と呼ばれる。
  論文  参考訳（メタデータ） (2023-02-03T00:12:12Z)
• WOC: A Handy Webcam-based 3D Online Chatroom [62.43306257598143]
  WOCはウェブカメラベースのマルチパーソンインタラクションのための3D仮想チャットルームである。 ユーザの3Dモーションをキャプチャして、個々の3D仮想アバターをリアルタイムで駆動する。
  論文  参考訳（メタデータ） (2022-09-02T01:34:14Z)
• A Full Dive into Realizing the Edge-enabled Metaverse: Visions, Enabling Technologies,and Challenges [93.06849621984684]
  モバイルインターネットの後継である「メタバース」の人気が高まっている。 メタバースの礼儀正しいバージョンは現存しているが、没入的で具現化され、相互運用可能なメタバースの完全なビジョンを実現するには程遠い。 通信やネットワークによる実装の問題に対処しない限り、Metaverseはインターネットを継承することは困難である。 本稿では、リソース制約のあるエッジデバイス上でのメタバースを実現するために、計算課題とクラウド・エッジ・コンピューティング・フレームワーク駆動のソリューションについて議論する。
  論文  参考訳（メタデータ） (2022-03-10T16:48:51Z)
• A Multi-user Oriented Live Free-viewpoint Video Streaming System Based On View Interpolation [15.575219833681635]
  リアルタイムに高密度な仮想ビューを合成するためのCNNベースのビューアルゴリズムを提案する。 また,マルチユーザ指向のストリーミング戦略を備えた,エンドツーエンドのライブビューポイントシステムを構築した。
  論文  参考訳（メタデータ） (2021-12-20T15:17:57Z)
• Wireless Edge-Empowered Metaverse: A Learning-Based Incentive Mechanism for Virtual Reality [102.4151387131726]
  メタバースにおけるVRサービスのための学習型インセンティブメカニズムフレームワークを提案する。 まず,仮想世界におけるVRユーザのための指標として,知覚の質を提案する。 第二に、VRユーザー(買い手)とVR SP(売り手)間のVRサービスの迅速な取引のために、オランダの二重オークション機構を設計する。 第3に,この競売プロセスの高速化を目的とした深層強化学習型競売機を設計する。
  論文  参考訳（メタデータ） (2021-11-07T13:02:52Z)
• SoMin.ai: Personality-Driven Content Generation Platform [60.49416044866648]
  世界初のパーソナリティ駆動型マーケティングコンテンツ生成プラットフォームであるSoMin.aiを紹介します。 このプラットフォームは、ディープ・マルチビュー・パーソナリティ・プロファイリング・フレームワークと、スタイル・ジェネレーティブ・敵ネットワークを組み合わせている。 ソーシャルネットワーキングのユーザエクスペリエンスの向上や、コンテンツマーケティングのルーチンに使用できる。
  論文  参考訳（メタデータ） (2020-11-30T08:33:39Z)
• Unmasking Communication Partners: A Low-Cost AI Solution for Digitally Removing Head-Mounted Displays in VR-Based Telepresence [62.997667081978825]
  バーチャルリアリティ(VR)における対面会話は、被験者がヘッドマウントディスプレイ(HMD)を装着する際の課題である 過去の研究では、高コストハードウェアを用いた実験室環境では、VRで個人用アバターを用いた高忠実な顔再構成が可能であることが示されている。 我々は,オープンソース,フリーソフトウェア,安価なハードウェアのみを利用する,このタスクのための最初の低コストシステムを提案する。
  論文  参考訳（メタデータ） (2020-11-06T23:17:12Z)

関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。

指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。