論文の概要: A Diagnostic Study of World-Space Human Recovery Under High Camera Dynamics
- arxiv url: http://arxiv.org/abs/2610.19729v2
- Date: Thu, 15 Oct 2026 15:51:15 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-17 06:09:33.003959
- Title: A Diagnostic Study of World-Space Human Recovery Under High Camera Dynamics
- Title(参考訳): ハイ・カメラ・ダイナミクスによる世界空間のヒューマン・リカバリに関する診断的研究
- Abstract要約: 我々は,K-Popストレステスト,ブロードキャストダンスビデオを導入する。
カメラと人間の推定値は、それぞれが自己整合性を持ち、不整合スケールで組み合わせられたときに漂流が現れることを示す。
我々は、このミスマッチを推定し、すべてのパフォーマーに1つのスケールを適用して、相対的な位置を1つの共有ワールドフレームに保ちながらドリフトを除去するクローズドフォーム補正を導出する。
- 参考スコア(独自算出の注目度): 32.12606571570869
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Monocular world-space human recovery methods excel on current benchmarks, but these rarely include fast camera motion. We introduce the K-Pop stress test, broadcast dance videos that combine fast, large camera motion with dense multi-person choreography. Leading methods produce plausible per-frame meshes on these videos, yet their world-space trajectories drift far from the performers' stage positions. Through a systematic diagnosis, we show that the camera and human estimates each remain self-consistent, and that the drift appears when they are combined at mismatched scales. Each is recovered at its own scale, so a mismatch between the two can turn camera motion into human drift that grows with camera displacement and becomes severe in broadcast dance videos. We derive a closed-form correction that estimates this mismatch and applies one scale to all performers, removing the drift while keeping their relative positions in one shared world frame. It requires no retraining and works with existing backends. Combined with physical constraints, the correction yields stable world-space reconstruction for choreography modeling, scene editing, data generation, and virtual reshooting. Project page: https://chien90190.github.io/worldhmr-fastcam-website/
- Abstract(参考訳): モノラルな世界空間の人間のリカバリ手法は、現在のベンチマークより優れているが、カメラの動きが速いことは滅多にない。
我々は,K-Popストレステスト,ブロードキャストダンスビデオを導入する。
リードする手法は、これらのビデオ上で、フレーム毎の可塑性メッシュを生成するが、彼らの世界空間の軌道はパフォーマーの舞台位置から遠く離れている。
体系的な診断により,カメラと人間の推定値はそれぞれが自己整合性であり,不整合スケールで組み合わせるとドリフトが出現することを示す。
それぞれが独自のスケールで回収されるので、両者のミスマッチは、カメラの動きを人間のドリフトに変え、カメラの変位とともに成長し、ブロードキャストダンスビデオでは厳しいものになる。
我々は、このミスマッチを推定し、すべてのパフォーマーに1つのスケールを適用して、相対的な位置を1つの共有ワールドフレームに保ちながらドリフトを除去するクローズドフォーム補正を導出する。
再トレーニングは不要で、既存のバックエンドで動作する。
物理的制約と組み合わせて、この補正はコレオグラフィーモデリング、シーン編集、データ生成、仮想再撮影のための安定した世界空間再構築をもたらす。
プロジェクトページ:https://chien90190.github.io/worldhmr-fastcam-website/
関連論文リスト
- DuoMo: Dual Motion Diffusion for World-Space Human Reconstruction [73.7305982336243]
DuoMoは、ノイズや不完全な観察で制約のないビデオから世界空間の座標で人間の動きを復元する生成方法である。
本手法は,運動学習を2つの拡散モデルに分解することでこの問題に対処する。
この2つのモデルは、ノイズや不完全な観察からでも、様々なシーンや軌道をまたいで動きを再構築することができる。
論文 参考訳(メタデータ) (2026-03-03T18:54:17Z) - WATCH: World-aware Allied Trajectory and pose reconstruction for Camera and Human [14.608329202942057]
原文(投稿日:2019/09/10)へのリンク 世界の人間の動きを、Wildのモノキュラービデオから再現することは、VR、グラフィックス、ロボティクスのアプリケーションでますます求められている。
We present WATCH (World-Aware Allied Trajectory and pose reconstruction for Camera and Human)は、両課題に対処する統一的な枠組みである。
本研究は、カメラと人間の動作関係を共同でモデル化することの有効性を実証し、グローバルな人間の動作再構成におけるカメラ翻訳統合の長年の課題に対処するための新たな洞察を提供する。
論文 参考訳(メタデータ) (2025-09-04T18:29:48Z) - HumanMM: Global Human Motion Recovery from Multi-shot Videos [24.273414172013933]
本稿では,複数のショット遷移を伴って,世界における長時間の人間の動きを再現する新しいフレームワークを提案する。
このような長時間の動作は、モーション生成やモーション理解といった応用に非常に有用である。
論文 参考訳(メタデータ) (2025-03-10T17:57:03Z) - World-Grounded Human Motion Recovery via Gravity-View Coordinates [60.618543026949226]
本研究では,新しい重力-視座標系における人間のポーズ推定手法を提案する。
提案したGVシステムは、ビデオフレーム毎に自然に重力に整合し、一意に定義されている。
提案手法は,カメラ空間と地上設定の両方でよりリアルな動きを再現し,精度と速度の両方で最先端の手法より優れる。
論文 参考訳(メタデータ) (2024-09-10T17:25:47Z) - Decoupling Human and Camera Motion from Videos in the Wild [67.39432972193929]
本研究では,野生の映像から地球規模の人間の軌道を再構築する手法を提案する。
カメラと人間の動きを分離することで、人間を同じ世界座標系に配置することができる。
論文 参考訳(メタデータ) (2023-02-24T18:59:15Z) - GLAMR: Global Occlusion-Aware Human Mesh Recovery with Dynamic Cameras [99.07219478953982]
ダイナミックカメラで記録したモノクロビデオから3次元グローバルなヒューマンメッシュリカバリのためのアプローチを提案する。
われわれはまず,視覚的動作に基づいて隠蔽されたヒトの身体運動を自己回帰的に埋め込む,深部再生運動充填装置を提案する。
従来の研究とは対照的に,我々の手法はダイナミックカメラを用いても,一貫したグローバル座標で人間のメッシュを再構築する。
論文 参考訳(メタデータ) (2021-12-02T18:59:54Z) - PhysCap: Physically Plausible Monocular 3D Motion Capture in Real Time [89.68248627276955]
シングルカラーカメラからのマーカレス3Dモーションキャプチャは、大きな進歩を遂げた。
しかし、これは非常に困難な問題であり、深刻な問題である。
我々はPhysCapについて紹介する。PhysCapは物理的に可塑性でリアルタイムでマーカーのない人間の3Dモーションキャプチャのための最初のアルゴリズムである。
論文 参考訳(メタデータ) (2020-08-20T10:46:32Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。