論文の概要: GraspHOI: Full-Body 3D Human-Object Reconstruction with Finger-Level Grasps from a Single In-the-Wild Image
- arxiv url: http://arxiv.org/abs/2608.28386v2
- Date: Mon, 31 Aug 2026 13:54:53 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-09-01 15:47:04.414905
- Title: GraspHOI: Full-Body 3D Human-Object Reconstruction with Finger-Level Grasps from a Single In-the-Wild Image
- Title(参考訳): GraspHOI:シングル・イン・ザ・ウィルド画像からの指レベルグラスによるフルボディ3次元物体再構成
- Abstract要約: 既存のモノクロフルボディ3次元人-物体相互作用(HOI)法は, 指レベルのグリップ最適化とカテゴリー非依存オブジェクト再構成を組み合わせない。
本研究では,1つの画像から全体3D HoIを再構成する最初のフレームワークであるGraspHOIについて述べる。
- 参考スコア(独自算出の注目度): 7.244351146169009
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Existing monocular full-body 3D human-object interaction (HOI) methods do not combine explicit finger-level grasp optimization with category-agnostic object reconstruction. Despite plausible body-object configurations, their fingers may float from or penetrate objects instead of forming a grasp. We present GraspHOI, the first framework that reconstructs a full-body 3D HOI from a single image while explicitly optimizing finger articulation against the reconstructed object. GraspHOI recovers object geometry directly, without predefined meshes or a fixed category vocabulary. It reconstructs the body, hands, and object separately, aligning them in metric camera space via depth-based registration and image-space alignment. Occlusion-aware palmar correspondences seat the object against the grasping hand, and contact-aware optimization refines arm and finger articulation to form surface contact without excessive penetration. Across four benchmarks and six baselines, GraspHOI improves relative human-object placement, hand accuracy, and contact plausibility. Full pipeline code will be released.
- Abstract(参考訳): 既存のモノクロフルボディ3次元人-物体相互作用(HOI)法は, 指レベルのグリップ最適化とカテゴリー非依存オブジェクト再構成を組み合わせない。
可塑性物体の形状にもかかわらず、指はつかむ代わりに物体から浮かんだり、貫いたりすることができる。
本研究では,1つの画像から全体3D HoIを再構成する最初のフレームワークであるGraspHOIについて述べる。
GraspHOIは、事前に定義されたメッシュや固定されたカテゴリ語彙なしで、オブジェクトの幾何学を直接回復する。
身体、手、物体を別々に再構築し、深度ベースの登録と画像空間のアライメントによってメートル法カメラ空間に配置する。
咬合を意識したパーマ対応は、握り手に対して物体を座らせ、接触を意識した最適化は、腕と指の関節を洗練し、過剰な浸透を伴わない表面接触を形成する。
4つのベンチマークと6つのベースラインで、GraspHOIは相対的な人間オブジェクトの配置、手の正確性、接触の可視性を改善している。
完全なパイプラインコードがリリースされる。
関連論文リスト
- PhotoHOI: Synthesizing 3D Hand-Object Interactions from a Single RGB Photograph [45.09993780203758]
1枚のRGB写真とオープン語彙言語命令から3Dハンドオブジェクトインタラクションシーケンスを合成するPhotoHOI
PhotoHOIはまず視覚言語モデルを使用して入力画像と命令を構造化されたタスク仕様に解析する。
そして、コンパクトなタスク関連3Dシーンを復元し、スムーズな衝突対応物体軌道を計画する。
論文 参考訳(メタデータ) (2026-08-03T08:39:31Z) - UnfoldArt: Zero-Shot Recovery of Full Articulated 3D Objects from Text or Image [58.40343808003224]
本稿では,テキストや画像からの3Dオブジェクトの再構成について,議論を巻き起こしたアプローチを提案する。
高レベルのエージェントは、視覚言語やビデオモデルからの知識を用いて、オブジェクトの意味論と動きを推論する。
低レベルエージェントは調音パラメータと相互作用点を推定する。
同じビデオは、合意された調律に条件付けされ、各部分をその動きを通して駆動し、隠された内部と幾何学を露呈する。
論文 参考訳(メタデータ) (2026-06-29T17:44:53Z) - Physically Grounded 3D Generative Reconstruction under Hand Occlusion using Proprioception and Multi-Contact Touch [3.926587614210279]
そこで本研究では, メカニカル・アモーダル・オブジェクト再構成とポーズ推定のためのマルチモーダル・物理的手法を提案する。
我々は物理的相互作用信号を利用する: プロリオセプションは、ポーズされたハンドジオメトリと、対象表面が横たわらなければならないマルチコンタクトタッチ制約を提供する。
論文 参考訳(メタデータ) (2026-04-10T08:32:51Z) - Joint Reconstruction of 3D Human and Object via Contact-Based Refinement Transformer [58.98785899556135]
本研究では,人間と物体の接触情報を効果的に活用する新しい関節型3次元物体再構成法(CONTHO)を提案する。
本システムには,1)3次元ガイドによる接触推定と,2)接触に基づく人間と物体の微細化の2つのコア設計がある。
論文 参考訳(メタデータ) (2024-04-07T06:01:49Z) - HOLD: Category-agnostic 3D Reconstruction of Interacting Hands and
Objects from Video [70.11702620562889]
HOLD - 単分子インタラクションビデオから手とオブジェクトを共同で再構成する最初のカテゴリーに依存しない方法。
我々は,3次元手と物体を2次元画像から切り離すことができる構成的明瞭な暗黙モデルを開発した。
本手法は,3次元手オブジェクトアノテーションに頼らず,組込みと組込みの両面において,完全教師付きベースラインに優れる。
論文 参考訳(メタデータ) (2023-11-30T10:50:35Z) - ShapeGraFormer: GraFormer-Based Network for Hand-Object Reconstruction from a Single Depth Map [11.874184782686532]
そこで本研究では, 現実的な3次元物体形状に対する最初のアプローチを提案し, 一つの深度マップから復元する。
我々のパイプラインは、入力されたボキセル化深度に1対1のマッピングを持つ、ボキセル化ハンドオブジェクト形状も予測する。
さらに、手動オブジェクトの相互作用に基づいて再構成された形状を洗練する別のGraFormerコンポーネントを追加する影響を示す。
論文 参考訳(メタデータ) (2023-10-18T09:05:57Z) - MOHO: Learning Single-view Hand-held Object Reconstruction with
Multi-view Occlusion-Aware Supervision [75.38953287579616]
ハンドヘルドオブジェクト再構成のためのハンドオブジェクトビデオから,多視点オクルージョン対応監視を利用する新しいフレームワークを提案する。
このような設定において、手による排他と対象の自己排他という2つの主要な課題に対処する。
HO3D と DexYCB のデータセットを用いた実験では、2D のMOHO が 3D の教師付き手法に対して大きなマージンで優れた結果を得ることが示された。
論文 参考訳(メタデータ) (2023-10-18T03:57:06Z) - Decaf: Monocular Deformation Capture for Face and Hand Interactions [77.75726740605748]
本稿では,単眼のRGBビデオから人間の顔と対話する人間の手を3Dで追跡する手法を提案する。
動作中の非剛性面の変形を誘発する定形物体として手をモデル化する。
本手法は,マーカーレスマルチビューカメラシステムで取得した現実的な顔変形を伴う手動・インタラクションキャプチャーデータセットに頼っている。
論文 参考訳(メタデータ) (2023-09-28T17:59:51Z) - Learning Explicit Contact for Implicit Reconstruction of Hand-held
Objects from Monocular Images [59.49985837246644]
我々は,手持ちの物体を暗黙的に再構築する上で,明示的な方法で接触をモデル化する方法を示す。
まず,1つの画像から3次元手オブジェクトの接触を直接推定するサブタスクを提案する。
第2部では,ハンドメッシュ面から近傍の3次元空間へ推定された接触状態を拡散する新しい手法を提案する。
論文 参考訳(メタデータ) (2023-05-31T17:59:26Z) - What's in your hands? 3D Reconstruction of Generic Objects in Hands [49.12461675219253]
我々の研究は、単一のRGB画像からハンドヘルドオブジェクトを再構築することを目的としている。
通常、既知の3Dテンプレートを仮定し、問題を3Dポーズ推定に還元する以前の作業とは対照的に、我々の作業は3Dテンプレートを知らずに汎用的なハンドヘルドオブジェクトを再構成する。
論文 参考訳(メタデータ) (2022-04-14T17:59:02Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。