論文の概要: Neural 3D Clothes Retargeting from a Single Image
- arxiv url: http://arxiv.org/abs/2102.00062v1
- Date: Fri, 29 Jan 2021 20:50:34 GMT
- ステータス: 処理完了
- システム内更新日: 2021-02-02 16:39:32.683112
- Title: Neural 3D Clothes Retargeting from a Single Image
- Title(参考訳): 単一の画像から再ターゲットする神経3D服
- Authors: Jae Shin Yoon, Kihwan Kim, Jan Kautz, and Hyun Soo Park
- Abstract要約: 本稿では,1枚のRGB画像で人物にフィットする3次元衣料テンプレートモデルの潜在的なポーズと変形を生成する方法を提案する。
この問題は、地上の真実データを取得することは不可能である、すなわち、異なる3D衣料品テンプレートモデルを全く同じポーズで身に着けている人々の画像として、基本的には不適切である。
そこで本研究では,3次元変形の物理的妥当性を検証するための半教師付き学習フレームワークを提案する。
- 参考スコア(独自算出の注目度): 91.5030622330039
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: In this paper, we present a method of clothes retargeting; generating the
potential poses and deformations of a given 3D clothing template model to fit
onto a person in a single RGB image. The problem is fundamentally ill-posed as
attaining the ground truth data is impossible, i.e., images of people wearing
the different 3D clothing template model at exact same pose. We address this
challenge by utilizing large-scale synthetic data generated from physical
simulation, allowing us to map 2D dense body pose to 3D clothing deformation.
With the simulated data, we propose a semi-supervised learning framework that
validates the physical plausibility of the 3D deformation by matching with the
prescribed body-to-cloth contact points and clothing silhouette to fit onto the
unlabeled real images. A new neural clothes retargeting network (CRNet) is
designed to integrate the semi-supervised retargeting task in an end-to-end
fashion. In our evaluation, we show that our method can predict the realistic
3D pose and deformation field needed for retargeting clothes models in
real-world examples.
- Abstract(参考訳): 本稿では,所定の3d衣料テンプレートモデルの潜在的なポーズと変形を発生させ,一つのrgb画像で個人に適合させる,衣料再ターゲティング手法を提案する。
この問題は、全く同じ姿勢で異なる3d衣料品テンプレートモデルを身に着けている人々のイメージなど、根拠となる真実データを得ることが不可能であることから、基本的には不適切である。
物理シミュレーションから生成された大規模合成データを利用して、2次元密度体ポーズを3次元衣料変形にマッピングします。
シミュレーションデータを用いて,所定の体間接触点や衣服シルエットと整合して3次元変形の物理的妥当性を検証し,ラベルのない実画像に適合する半教師付き学習フレームワークを提案する。
新しいニューラルネットワークリターゲティングネットワーク(CRNet)は、セミスーパーバイザーのリターゲティングタスクをエンドツーエンドで統合するように設計されている。
本評価では,現実的な3次元ポーズと,実際の実例における衣服モデルの再ターゲティングに必要な変形場を予測できることを示す。
関連論文リスト
- Cloth2Body: Generating 3D Human Body Mesh from 2D Clothing [54.29207348918216]
Cloth2Bodyは、入力の部分的な観察と出力の多様性によって引き起こされる新しい課題に対処する必要がある。
本稿では,2次元衣料品画像のポーズと形状によってパラメータ化された3Dボディメッシュを高精度に推定できるエンドツーエンドフレームワークを提案する。
実験結果から示されるように,提案手法は最先端の性能を実現し,自然および多様な3Dボディメッシュを2次元画像から効果的に回収することができる。
論文 参考訳(メタデータ) (2023-09-28T06:18:38Z) - PERGAMO: Personalized 3D Garments from Monocular Video [6.8338761008826445]
PERGAMOはモノクロ画像から3D衣服の変形可能なモデルを学ぶためのデータ駆動型アプローチである。
まず,1枚の画像から衣服の3次元形状を再構築する新しい手法を紹介し,それを用いて単眼ビデオから衣服のデータセットを構築する。
本手法は,実世界の動作にマッチする衣料アニメーションを作成でき,モーションキャプチャーデータセットから抽出した身体の動きを一般化できることを示す。
論文 参考訳(メタデータ) (2022-10-26T21:15:54Z) - Realistic, Animatable Human Reconstructions for Virtual Fit-On [0.7649716717097428]
個人化された3D人間モデルに異なる衣服を合わせることができるエンドツーエンドの仮想試着パイプラインを提案する。
本研究の主な目的は、3次元仮想環境において、アニマタブルな3次元人間モデルを構築し、異なる衣服を試着することである。
論文 参考訳(メタデータ) (2022-10-16T13:36:24Z) - The Power of Points for Modeling Humans in Clothing [60.00557674969284]
現在、アーティストはリアルな衣服で自然に動く3Dアバターを作る必要がある。
3次元表現は様々なトポロジを高分解能で捉えることができ、データから学習できることを示す。
我々は、異なる衣服の形状を表現するために、新しい局所的な衣服幾何学的特徴を持つニューラルネットワークを訓練する。
論文 参考訳(メタデータ) (2021-09-02T17:58:45Z) - Detailed Avatar Recovery from Single Image [50.82102098057822]
本稿では,単一画像からエンフデテールアバターを回収するための新しい枠組みを提案する。
階層的メッシュ変形フレームワークでは、ディープニューラルネットワークを使用して3次元形状を洗練しています。
本手法は,皮膚モデルを超えて,完全なテクスチャで詳細な人体形状を復元することができる。
論文 参考訳(メタデータ) (2021-08-06T03:51:26Z) - SCANimate: Weakly Supervised Learning of Skinned Clothed Avatar Networks [54.94737477860082]
本論文では,着る人間の生の3Dスキャンをイメージ可能なアバターに変える,エンドツーエンドのトレーニング可能なフレームワークを提案する。
SCANimateはカスタマイズされたメッシュテンプレートや表面メッシュ登録に依存しません。
本手法はポーズ認識型外観モデルに適用でき,完全にテクスチャ化されたアバターを生成できる。
論文 参考訳(メタデータ) (2021-04-07T17:59:58Z) - Deep Fashion3D: A Dataset and Benchmark for 3D Garment Reconstruction
from Single Images [50.34202789543989]
Deep Fashion3Dは、これまでで最大の3D衣料品のコレクションだ。
3D機能ライン、3Dボディポーズ、対応するマルチビューリアルイメージなど、リッチなアノテーションを提供する。
一つのネットワークであらゆる種類の衣服を学習できる新しい適応型テンプレートが提案されている。
論文 参考訳(メタデータ) (2020-03-28T09:20:04Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。