論文の概要: Surface Keypoint Representation for Multi-Object and Articulated Human-Object Interaction Generation
- arxiv url: http://arxiv.org/abs/2608.03158v1
- Date: Tue, 04 Aug 2026 05:47:07 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-08-05 15:30:23.045077
- Title: Surface Keypoint Representation for Multi-Object and Articulated Human-Object Interaction Generation
- Title(参考訳): 複数物体・人工物体間相互作用生成のための表面キーポイント表現
- Authors: Xiaogang Peng, Zeyu Han, Zichong Meng, Yiming Xie, Jihua Zhu, Gang Hua, Huaizu Jiang,
- Abstract要約: 本研究では,剛性成分の物体運動表現として曲面軌道を提案する。
この表現は、ポイントダイナミクスから直接、多目的調整と多様な調音機構を扱う。
HOI生成をテキストやウェイポイントから物体の動きを生成し、接触距離場を予測し、接触距離場を合成する3つの段階に分類する。
- 参考スコア(独自算出の注目度): 45.67585781847749
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Daily activities require humans to coordinate whole-body motion with the motion of surrounding objects. Despite recent progress in human-object interaction (HOI) generation, most existing methods assume interactions with a single rigid object and do not extend well to scenarios involving a variable number of objects or articulated objects with diverse joint mechanisms. We propose surface keypoint trajectories as an object motion representation: for each rigid component, whether a standalone object or one part of an articulated assembly, we track a small set of non-collinear surface points over time. This representation handles multi-object coordination and diverse articulation mechanisms directly from point dynamics without requiring explicit joint-type specification. To model when and where each body region contacts each object, we introduce a spatio-temporal contact distance field that extends distance-based contact modeling to whole-body, multi-object, and articulated settings. We factorize HOI generation into three stages: generating object motions from text or waypoints, predicting the contact distance field, and synthesizing whole-body motion with contact-guided optimization. Experiments on ParaHome, HIMO, ARCTIC, and OMOMO demonstrate better or comparable performance to existing methods across single-object, multi-object, and articulated interaction settings.
- Abstract(参考訳): 日常の活動では、人間は周囲の物体の動きと全身の動きを調整する必要がある。
近年のHuman-object Interaction (HOI) 生成の進展にもかかわらず、既存のほとんどの手法は単一の剛体物体との相互作用を前提としており、可変数のオブジェクトや多種多様な関節機構を持つ明瞭なオブジェクトを含むシナリオにうまく及ばない。
本研究では,物体の運動表現として表面キーポイントトラジェクトリを提案する。各剛性成分に対して,単独の物体か,あるいは組立体の1つの部分かは,時間経過とともに少数の非境界面点をトラックする。
この表現は、明示的な関節型仕様を必要とせず、ポイントダイナミクスから直接多目的調整と多様な調音機構を扱う。
それぞれの身体領域が各物体に接触した時期と場所をモデル化するために,距離ベース接触モデリングを全身・多目的・調音設定に拡張する時空間接触距離場を導入する。
HOI生成はテキストやウェイポイントから物体の動きを生成し、接触距離場を予測し、接触誘導最適化により全身の動きを合成する3つの段階に分類する。
ParaHome、HIMO、ARCTIC、OMOMOの実験では、単一オブジェクト、複数オブジェクト、明瞭なインタラクション設定で既存のメソッドと同等または同等の性能を示している。
関連論文リスト
- GIRAF: Towards Generalizable Human Interactions with Articulated Objects [50.52795413484619]
そこで本論文では,テキスト条件付き拡散モデルについて述べる。
提案手法は、現在最先端の手法を超越して、未確認のオブジェクト構成に強い一般化を示した。
論文 参考訳(メタデータ) (2026-07-08T19:30:44Z) - MMHOI: Modeling Complex 3D Multi-Human Multi-Object Interactions [20.96140289964853]
本稿では,12の日常シナリオの画像からなる大規模多目的インタラクションデータセットMMHOIを提案する。
MMHOIは、すべての人やオブジェクトに対して完全な3D形状とアノテーションを提供し、78のアクションカテゴリと14のインタラクション固有のボディパーツのラベルを提供する。
MMHOI-Netは、人間と物体の3次元空間、それらの相互作用、および関連する動作を共同で推定するエンド・ツー・エンドのトランスフォーマーベースのニューラルネットワークである。
論文 参考訳(メタデータ) (2025-10-09T06:18:12Z) - InteractMove: Text-Controlled Human-Object Interaction Generation in 3D Scenes with Movable Objects [15.92165183796286]
動画像を用いた3次元シーンにおけるテキスト制御によるオブジェクトインタラクション生成の課題を提案する。
既存の人間とシーンの相互作用データセットは、不十分な相互作用カテゴリに悩まされる。
異なる手関節の接触領域を予測するための手指型手指合せ学習を提案する。
論文 参考訳(メタデータ) (2025-09-28T03:29:15Z) - EigenActor: Variant Body-Object Interaction Generation Evolved from Invariant Action Basis Reasoning [66.68366281305977]
本稿では,テキストベースの命令から3次元オブジェクト間相互作用(HOI)を推定するクロスモーダル合成タスクについて検討する。
既存のテキスト対HOI合成法は主に、テキストからオブジェクト固有の3D体の動きへの直接マッピングをデプロイする。
本稿では,テキスト・ツー・ホイタスクのための新しいボディーポーズ生成戦略を提案する。
論文 参考訳(メタデータ) (2025-03-01T07:15:10Z) - Controllable Human-Object Interaction Synthesis [77.56877961681462]
本研究では,3次元シーンにおける同期物体の動きと人間の動きを生成するための制御可能な人間-物体相互作用合成(CHOIS)を提案する。
ここでは,高レベルな計画から効果的に抽出できるスタイルや意図を言語記述が通知し,シーン内の動きをグラウンド化する。
我々のモジュールは経路計画モジュールとシームレスに統合され、3D環境における長期的相互作用の生成を可能にします。
論文 参考訳(メタデータ) (2023-12-06T21:14:20Z) - Full-Body Articulated Human-Object Interaction [61.01135739641217]
CHAIRSは16.2時間の多目的相互作用からなる大規模な動きキャプチャーされたf-AHOIデータセットである。
CHAIRSは、対話的なプロセス全体を通して、人間と明瞭なオブジェクトの両方の3Dメッシュを提供する。
HOIにおける幾何学的関係を学習することにより,人間のポーズ推定を利用した最初のモデルが考案された。
論文 参考訳(メタデータ) (2022-12-20T19:50:54Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。