論文の概要: Neural Pose Transfer by Spatially Adaptive Instance Normalization
- arxiv url: http://arxiv.org/abs/2003.07254v2
- Date: Fri, 29 May 2020 17:08:21 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-23 03:43:30.652022
- Title: Neural Pose Transfer by Spatially Adaptive Instance Normalization
- Title(参考訳): 空間適応インスタンス正規化による神経ポーズ伝達
- Authors: Jiashun Wang, Chao Wen, Yanwei Fu, Haitao Lin, Tianyun Zou, Xiangyang
Xue, Yinda Zhang
- Abstract要約: 本稿では,最新の画像スタイル転送技術を用いてポーズ転送を解く,最初のニューラルポーズ転送モデルを提案する。
私たちのモデルは、ソースとターゲットメッシュ間の通信を一切必要としません。
実験により, 提案モデルでは, 対象メッシュへの変形を効果的に伝達することができ, 未確認の同一性やメッシュのポーズに対処できる優れた一般化能力を有することが示された。
- 参考スコア(独自算出の注目度): 73.04483812364127
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Pose transfer has been studied for decades, in which the pose of a source
mesh is applied to a target mesh. Particularly in this paper, we are interested
in transferring the pose of source human mesh to deform the target human mesh,
while the source and target meshes may have different identity information.
Traditional studies assume that the paired source and target meshes are existed
with the point-wise correspondences of user annotated landmarks/mesh points,
which requires heavy labelling efforts. On the other hand, the generalization
ability of deep models is limited, when the source and target meshes have
different identities. To break this limitation, we proposes the first neural
pose transfer model that solves the pose transfer via the latest technique for
image style transfer, leveraging the newly proposed component -- spatially
adaptive instance normalization. Our model does not require any correspondences
between the source and target meshes. Extensive experiments show that the
proposed model can effectively transfer deformation from source to target
meshes, and has good generalization ability to deal with unseen identities or
poses of meshes. Code is available at
https://github.com/jiashunwang/Neural-Pose-Transfer .
- Abstract(参考訳): ポーズ転送は数十年にわたって研究されており、ソースメッシュのポーズをターゲットメッシュに適用している。
特に本稿では,対象のヒューマンメッシュを変形させるために,ソース・ヒューマンメッシュのポーズを転送することに関心がある。
従来の研究では、ペアのソースとターゲットのメッシュは、ユーザのアノテートされたランドマーク/メシュポイントのポイントワイド対応によって存在すると仮定されている。
一方、ソースとターゲットメッシュが異なる同一性を持つ場合、ディープモデルの一般化能力は制限される。
そこで本研究では,新たに提案する空間適応型インスタンス正規化(spatially adaptive instance normalization)を活用し,最新の画像転送手法によるポーズ伝達を解く,最初のニューラルポーズ伝達モデルを提案する。
我々のモデルは、ソースとターゲットメッシュ間の通信を必要としない。
大規模な実験により,提案モデルでは,変形を対象メッシュへ効果的に転送することができ,未確認の同一性やメッシュのポーズに対処できる優れた一般化能力を有することが示された。
コードはhttps://github.com/jiashunwang/Neural-Pose-Transferで公開されている。
関連論文リスト
- Weakly-supervised 3D Pose Transfer with Keypoints [57.66991032263699]
3Dポーズ転送の主な課題は、1) 異なる文字で同じポーズを行うペアトレーニングデータの欠如、2) ターゲットメッシュからポーズと形状情報を分離すること、3) 異なるトポロジを持つメッシュに適用することの難しさである。
本稿では,これらの課題を克服するためのキーポイントベースのフレームワークを提案する。
論文 参考訳(メタデータ) (2023-07-25T12:40:24Z) - ReorientDiff: Diffusion Model based Reorientation for Object
Manipulation [18.95498618397922]
望ましい設定でオブジェクトを操作できることは、ロボットが様々な実践的な応用を完了するための基本的な要件である。
本稿では,拡散モデルに基づく手法を用いたリオリエンテーション計画手法であるReorientDiffを提案する。
提案手法は,YCBオブジェクトの集合と吸引グリップを用いて評価し,95.2%のシミュレーション成功率を示す。
論文 参考訳(メタデータ) (2023-02-28T00:08:38Z) - Generalized One-shot Domain Adaption of Generative Adversarial Networks [72.84435077616135]
GAN(Generative Adversarial Network)の適応は、事前訓練されたGANを、限られたトレーニングデータを持つ特定のドメインに転送することを目的としている。
我々は、ソースドメインからターゲットドメインへの適応を、テクスチャや色といったグローバルなスタイルの移行と、ソースドメインに属さない新しいエンティティの出現の2つの部分に分離できると考えている。
我々の中核的な目的は、参照と合成の内部分布のギャップをワッサーシュタイン距離によって制限することである。
論文 参考訳(メタデータ) (2022-09-08T09:24:44Z) - RAIN: RegulArization on Input and Network for Black-Box Domain
Adaptation [80.03883315743715]
ソースのないドメイン適応は、ソースデータを公開することなく、ソース訓練されたモデルをターゲットドメインに転送する。
このパラダイムは、ソースモデルに対する敵対的な攻撃のため、データ漏洩のリスクがある。
そこで我々は,入力レベルとネットワークレベルの両方の正規化からブラックボックスドメインを適応させる新しい手法であるRAIN(RegulArization on Input and Network)を提案する。
論文 参考訳(メタデータ) (2022-08-22T18:18:47Z) - 3D Pose Transfer with Correspondence Learning and Mesh Refinement [41.92922228475176]
3Dポーズ転送は、最も困難な3D生成タスクの1つである。
本研究では,人間と動物のメッシュの3次元ポーズ伝達を支援するための通信抑制ネットワークを提案する。
論文 参考訳(メタデータ) (2021-09-30T11:49:03Z) - Transformer-Based Source-Free Domain Adaptation [134.67078085569017]
本研究では,ソースフリードメイン適応(SFDA)の課題について検討する。
我々は、FDAの一般化モデルを学ぶためのTransformer(TransDA)という、汎用的で効果的なフレームワークを提案する。
論文 参考訳(メタデータ) (2021-05-28T23:06:26Z) - Progressive and Aligned Pose Attention Transfer for Person Image
Generation [59.87492938953545]
本稿では,ある人物のポーズを対象のポーズに移す,新たなポーズ移動のための生成的広告ネットワークを提案する。
Pose-Attentional Transfer Block (PATB) と Aligned Pose-Attentional Transfer Bloc (APATB) の2種類のブロックを使用します。
Market-1501およびDeepFashionデータセットにおけるモデルの有効性を定量的および定性測定を用いて検証する。
論文 参考訳(メタデータ) (2021-03-22T07:24:57Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。