Fugu-MT 論文翻訳(概要): POSE: Pose estimation Of virtual Sync Exhibit system

論文の概要: POSE: Pose estimation Of virtual Sync Exhibit system

arxiv url: http://arxiv.org/abs/2410.15343v1
Date: Sun, 20 Oct 2024 09:34:15 GMT
ステータス: 翻訳完了
システム内更新日: 2024-10-22 13:12:47.777233
Title: POSE: Pose estimation Of virtual Sync Exhibit system
Title（参考訳）: POSE: Virtual Sync Exhibit System のポース推定
Authors: Hao-Tang Tsui, Yu-Rou Tuan, Jia-You Chen,
Abstract要約: その動機は、フィットネスリングで遊ぶときにジョイスティックやセンサーを使うのが不便であることです。ジョイスティックを交換し,コストを削減するために,仮想アバターをポーズ推定により制御し,実際の人の動きを識別するプラットフォームを開発した。
参考スコア（独自算出の注目度）: 0.0
License:
Abstract: This work is a portable MetaVerse implementation, and we use 3D pose estimation with AI to make virtual avatars do synchronized actions and interact with the environment. The motivation is that we find it inconvenient to use joysticks and sensors when playing with fitness rings. In order to replace joysticks and reduce costs, we developed a platform that can control virtual avatars through pose estimation to identify the movements of real people, and we also implemented a multi-process to achieve modularization and reduce the overall latency.
Abstract（参考訳）: この作業はポータブルなMetaVerse実装であり、仮想アバターを同期動作させ、環境と対話させるために、AIと3Dポーズ推定を使用する。その動機は、フィットネスリングで遊ぶときにジョイスティックやセンサーを使うのが不便であることです。ジョイスティックの置き換えとコスト削減のために,実際の人の動きを推定して仮想アバターを制御できるプラットフォームを開発し,モジュール化を実現し,全体のレイテンシを低減するためにマルチプロセスを実装した。

関連論文リスト

Universal Facial Encoding of Codec Avatars from VR Headsets [32.60236093340087]
コンシューマー向けVRヘッドセットのヘッドマウントカメラ(HMC)を用いて,光リアルアバターをリアルタイムにアニメーションする手法を提案する。本稿では,実行時の効率向上に最小限のコストで精度を高める軽量な式キャリブレーション機構を提案する。
論文参考訳（メタデータ） (2024-07-17T22:08:15Z)
Self-Avatar Animation in Virtual Reality: Impact of Motion Signals Artifacts on the Full-Body Pose Reconstruction [13.422686350235615]
本研究の目的は,自己アバターのフルボディポーズの再現に対する影響を計測することである。テキストYOLOv8のポーズ推定から推定した3次元動画像と3次元動画像座標を用いて動画像再構成誤差を解析する。
論文参考訳（メタデータ） (2024-04-29T12:02:06Z)
Physics-based Motion Retargeting from Sparse Inputs [73.94570049637717]
商用AR/VR製品はヘッドセットとコントローラーのみで構成されており、ユーザーのポーズのセンサーデータは非常に限られている。本研究では, 多様な形態のキャラクタに対して, 粗い人間のセンサデータからリアルタイムに動きをターゲットする手法を提案する。アバターのポーズは、下半身のセンサー情報がないにもかかわらず、驚くほどよくユーザと一致していることを示す。
論文参考訳（メタデータ） (2023-07-04T21:57:05Z)
QuestEnvSim: Environment-Aware Simulated Motion Tracking from Sparse Sensors [69.75711933065378]
ヘッドセットとコントローラーのポーズは,高度に制約された環境においても,現実的なフルボディのポーズを生成可能であることを示す。本稿では,環境表現,接触報酬,シーンランダム化の3つの特徴について論じる。
論文参考訳（メタデータ） (2023-06-09T04:40:38Z)
Perpetual Humanoid Control for Real-time Simulated Avatars [77.05287269685911]
本稿では,高忠実度動作模倣と耐故障動作を実現する物理に基づくヒューマノイドコントローラを提案する。コントローラは、外部の安定化力を使わずに1万本のモーションクリップを学習できる。実時間およびリアルタイムのマルチパーソンアバター使用事例において,映像ベースのポーズ推定器と言語ベースのモーションジェネレータからノイズのあるポーズを模倣するために,制御器の有効性を実証する。
論文参考訳（メタデータ） (2023-05-10T20:51:37Z)
Force-Aware Interface via Electromyography for Natural VR/AR Interaction [69.1332992637271]
我々はVR/ARにおける自然的および直感的な力入力のための学習ベースのニューラルネットワークを設計する。我々は,3.3%の平均誤差で指の力量をリアルタイムでデコードし,キャリブレーションの少ない新規ユーザに一般化できることを実証した。今後のVR/ARにおける、より現実的な物理性に向けた研究を進めるために、我々の研究成果を期待する。
論文参考訳（メタデータ） (2022-10-03T20:51:25Z)
QuestSim: Human Motion Tracking from Sparse Sensors with Simulated Avatars [80.05743236282564]
人間の身体の動きのリアルタイム追跡は、AR/VRにおける没入感のある体験に不可欠である。本稿では,HMDと2つのコントローラから疎信号を取り出す強化学習フレームワークを提案する。一つのポリシーは、多様な移動スタイル、異なる体の大きさ、新しい環境に対して堅牢であることを示す。
論文参考訳（メタデータ） (2022-09-20T00:25:54Z)
AvatarPoser: Articulated Full-Body Pose Tracking from Sparse Motion Sensing [24.053096294334694]
AvatarPoserは、ユーザの頭と手の動きのみを入力として、世界座標におけるフルボディポーズを予測する最初の学習ベースの方法である。提案手法はTransformerエンコーダ上に構築され,入力信号から深い特徴を抽出し,学習した局所的な関節方向からグローバルな動きを分離する。我々の評価では、AvatarPoserは大規模なモーションキャプチャーデータセットの評価において、新しい最先端の結果を得た。
論文参考訳（メタデータ） (2022-07-27T20:52:39Z)
Robust Egocentric Photo-realistic Facial Expression Transfer for Virtual Reality [68.18446501943585]
ソーシャルな存在は、バーチャルリアリティー(VR)におけるデジタル人間による次世代コミュニケーションシステムを支える最高の3DビデオリアルVRアバターは、人固有の(PS)モデルに依存します。本稿では,エンドツーエンドのマルチアイデンティティアーキテクチャを提案することで,これらの制限を克服する。
論文参考訳（メタデータ） (2021-04-10T15:48:53Z)

関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。