論文の概要: UNIF: United Neural Implicit Functions for Clothed Human Reconstruction
and Animation
- arxiv url: http://arxiv.org/abs/2207.09835v1
- Date: Wed, 20 Jul 2022 11:41:29 GMT
- ステータス: 処理完了
- システム内更新日: 2022-07-21 13:42:27.565663
- Title: UNIF: United Neural Implicit Functions for Clothed Human Reconstruction
and Animation
- Title(参考訳): UNIF: 衣服の復元とアニメーションのためのユナイテッド・ニューラルインシシット機能
- Authors: Shenhan Qian, Jiale Xu, Ziwei Liu, Liqian Ma, Shenghua Gao
- Abstract要約: そこで本稿では, 生スキャンと骨格を入力として, 人体再構成とアニメーションのパートベース手法を提案する。
本手法は, 部品の監督ではなく, 身体の動きから部品の分離を学習し, 布を被った人間や他の関節の物体に拡張することができる。
- 参考スコア(独自算出の注目度): 53.2018423391591
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We propose united implicit functions (UNIF), a part-based method for clothed
human reconstruction and animation with raw scans and skeletons as the input.
Previous part-based methods for human reconstruction rely on ground-truth part
labels from SMPL and thus are limited to minimal-clothed humans. In contrast,
our method learns to separate parts from body motions instead of part
supervision, thus can be extended to clothed humans and other articulated
objects. Our Partition-from-Motion is achieved by a bone-centered
initialization, a bone limit loss, and a section normal loss that ensure stable
part division even when the training poses are limited. We also present a
minimal perimeter loss for SDF to suppress extra surfaces and part overlapping.
Another core of our method is an adjacent part seaming algorithm that produces
non-rigid deformations to maintain the connection between parts which
significantly relieves the part-based artifacts. Under this algorithm, we
further propose "Competing Parts", a method that defines blending weights by
the relative position of a point to bones instead of the absolute position,
avoiding the generalization problem of neural implicit functions with inverse
LBS (linear blend skinning). We demonstrate the effectiveness of our method by
clothed human body reconstruction and animation on the CAPE and the ClothSeq
datasets.
- Abstract(参考訳): 本稿では,生スキャンとスケルトンを入力として,人間の衣服復元とアニメーションのための部分ベース手法である統一暗黙機能(unif)を提案する。
従来のヒト再建法はSMPLの接地部ラベルに依存しており、最小限のヒトに限られている。
対照的に,本手法では,身体運動と身体運動の分離を,部分監督ではなく学習し,衣服を装着した人間や他の関節のある物体に拡張することができる。
骨中心初期化,骨限界損失,およびトレーニングポーズが制限された場合でも安定な部分分割を保証する部分正常損失によって,移動の分割が達成される。
また,余剰表面と部分重なりを抑えるため,SDFは最小周波ロスを生じさせる。
本手法のもう1つのコアは、部品間の接続を維持するために非剛性変形を発生させる近接部分シーミングアルゴリズムである。
このアルゴリズムでは, 逆LBS(線形ブレンドスキン)を用いたニューラル暗黙関数の一般化問題を回避し, 絶対位置ではなく, 点と骨との相対位置による混合重量を定義する手法である「コンペティング・パート」を提案する。
本稿では,CAPEおよびClosSeqデータセット上での人体再構築とアニメーションによる手法の有効性を示す。
関連論文リスト
- Reconstructing 3D Human Pose from RGB-D Data with Occlusions [11.677978425905096]
本稿では,RGB-D画像から3次元人体をオクルージョンで再構成する手法を提案する。
そこで本研究では,シーン情報と事前知識に基づいて,意味的かつ物理的に妥当な人体を再構築し,解決空間を縮小することを提案する。
提案手法は, ProXデータセットを用いて実験を行い, 提案手法が他の手法と比較して精度が高く, 妥当な結果が得られることを示した。
論文 参考訳(メタデータ) (2023-10-02T14:16:13Z) - Mitigating the Effect of Incidental Correlations on Part-based Learning [50.682498099720114]
部分ベースの表現は、より解釈可能で、限られたデータでより一般化できる。
パートベース表現のための2つの革新的な正規化手法を提案する。
我々は、ベンチマークデータセット上の数ショットの学習タスクに対して、最先端(SoTA)パフォーマンスを示す。
論文 参考訳(メタデータ) (2023-09-30T13:44:48Z) - Body Part-Based Representation Learning for Occluded Person
Re-Identification [102.27216744301356]
隠蔽人物再識別(ReID)とは,隠蔽人物画像と包括的人物画像とのマッチングを目的とした人物検索タスクである。
パートベースの手法は、微細な情報を提供し、部分的に見える人間の体を表現するのに適しているため、有益であることが示されている。
本稿では,BPBreIDという身体部分に基づくReIDモデルを提案する。
論文 参考訳(メタデータ) (2022-11-07T16:48:41Z) - Unsupervised Pose-Aware Part Decomposition for 3D Articulated Objects [68.73163598790255]
本研究では,機械的関節を有する人工関節オブジェクトを対象とする新しい環境に対処するため,PD(unsupervised Pose-aware Part Decomposition)を提案する。
本研究は,(1)非原始的な暗黙的表現による部分分解の教師なし学習を促進させ,(2)単一フレーム形状の監督下での協調パラメータとして機能することを示す。
論文 参考訳(メタデータ) (2021-10-08T23:53:56Z) - SCALE: Modeling Clothed Humans with a Surface Codec of Articulated Local
Elements [62.652588951757764]
衣服のモデル化と再構成は、調音性、非剛性変形、衣服の種類や地形の変化などにより困難である。
最近の研究では、ニューラルネットワークを使ってローカルな表面要素をパラメータ化している。
まず、人間の体モデルに基づいて表面要素を変形させます。
第2に,局所的な特徴から局所的な幾何学を回帰させることにより,既存の神経表面要素の制限を解消する。
論文 参考訳(メタデータ) (2021-04-15T17:59:39Z) - Monocular Human Pose and Shape Reconstruction using Part Differentiable
Rendering [53.16864661460889]
近年の研究では、3次元基底真理によって教師されるディープニューラルネットワークを介してパラメトリックモデルを直接推定する回帰に基づく手法が成功している。
本稿では,ボディセグメンテーションを重要な監視対象として紹介する。
部分分割による再構成を改善するために,部分分割により部分ベースモデルを制御可能な部分レベル微分可能部を提案する。
論文 参考訳(メタデータ) (2020-03-24T14:25:46Z) - AttentionAnatomy: A unified framework for whole-body organs at risk
segmentation using multiple partially annotated datasets [30.23917416966188]
CT(Computed tomography)におけるOAR(Organs-at-risk)記述は,放射線治療(RT)計画において重要なステップである。
提案したエンドツーエンドの畳み込みニューラルネットワークモデルである textbfAttentionAnatomy は、3つの部分注釈付きデータセットで共同でトレーニングできる。
提案手法の実験結果から, ソレンセン・ディース係数 (DSC) と95%ハウスドルフ距離の両面で有意な改善が得られた。
論文 参考訳(メタデータ) (2020-01-13T18:31:34Z) - Skeleton Extraction from 3D Point Clouds by Decomposing the Object into
Parts [0.0]
対象物をその部分へ分解することで,非組織的な点雲から曲線骨格を抽出することを提案する。
我々は、GCの基本特性である翻訳対称性を用いて、点雲から部品を抽出する。
パートベースのアプローチは、ユーザインタラクションのための自然で直感的なインターフェースも提供する。
論文 参考訳(メタデータ) (2019-12-26T20:52:57Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。