論文の概要: Human Pose Transfer by Adaptive Hierarchical Deformation
- arxiv url: http://arxiv.org/abs/2012.06940v1
- Date: Sun, 13 Dec 2020 01:49:26 GMT
- ステータス: 処理完了
- システム内更新日: 2021-05-09 12:46:04.688648
- Title: Human Pose Transfer by Adaptive Hierarchical Deformation
- Title(参考訳): 適応的階層変形による人間のポーズ伝達
- Authors: Jinsong Zhang, Xingzi Liu, Kun Li
- Abstract要約: 階層的変形レベルが2つある適応型ポーズ転送ネットワークを提案する。
最初のレベルは、ターゲットポーズに沿った人間の意味解析を生成します。
第2のレベルは、セマンティックガイダンスでターゲットポーズにおける最終テクスチャ化された人物画像を生成する。
- 参考スコア(独自算出の注目度): 24.70009597455219
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Human pose transfer, as a misaligned image generation task, is very
challenging. Existing methods cannot effectively utilize the input information,
which often fail to preserve the style and shape of hair and clothes. In this
paper, we propose an adaptive human pose transfer network with two hierarchical
deformation levels. The first level generates human semantic parsing aligned
with the target pose, and the second level generates the final textured person
image in the target pose with the semantic guidance. To avoid the drawback of
vanilla convolution that treats all the pixels as valid information, we use
gated convolution in both two levels to dynamically select the important
features and adaptively deform the image layer by layer. Our model has very few
parameters and is fast to converge. Experimental results demonstrate that our
model achieves better performance with more consistent hair, face and clothes
with fewer parameters than state-of-the-art methods. Furthermore, our method
can be applied to clothing texture transfer.
- Abstract(参考訳): 人間のポーズ転送は、不整合画像生成タスクとして、非常に難しい。
既存の方法は入力情報を効果的に利用できないため、髪や衣服のスタイルや形状を保存できないことが多い。
本稿では,二つの階層的変形レベルを有する適応型ポーズ伝達ネットワークを提案する。
第1のレベルは、ターゲットポーズに整合した人間の意味解析を生成し、第2のレベルは、ターゲットポーズにおける最終テクスチャ化された人物イメージを、セマンティックガイダンスで生成する。
すべての画素を有効な情報として扱うバニラ畳み込みの欠点を回避するため,両レベルのゲート畳み込みを用いて重要な特徴を動的に選択し,画像層を層単位で適応的に変形させる。
私たちのモデルはパラメータがほとんどなく、収束が速い。
実験により,本モデルは,最先端手法よりも少ないパラメータで,より整合性のある髪,顔,衣服で良好な性能が得られることが示された。
また,本手法は衣服の質感伝達にも応用できる。
関連論文リスト
- Lifting by Image -- Leveraging Image Cues for Accurate 3D Human Pose
Estimation [10.374944534302234]
2次元ポーズからのリフト」法が3Dヒューマンポーズ推定の主流となっている(3DHPE)
画像中のリッチな意味とテクスチャ情報は、より正確な「リフト」手順に寄与する。
本稿では, 一般化問題の原因と画像特徴の有効性について, 新たな知見を与える。
論文 参考訳(メタデータ) (2023-12-25T07:50:58Z) - Pose Guided Human Image Synthesis with Partially Decoupled GAN [25.800174118151638]
Pose Guided Human Image Synthesis (PGHIS) は、人間のイメージを基準ポーズから目標ポーズへ変換する難しいタスクである。
本研究では,人体を複数の部分に分解し,現実的な人物像の合成を誘導する手法を提案する。
さらに,PGHISのためのマルチヘッドアテンションベースモジュールを設計する。
論文 参考訳(メタデータ) (2022-10-07T15:31:37Z) - Neural Human Deformation Transfer [26.60034186410921]
人間の変形伝達の問題は、異なるキャラクター間でのポーズの再ターゲティングが目的である。
我々は異なるアプローチをとり、キャラクターのポーズを変更することなく、キャラクターのアイデンティティを新しいアイデンティティに変換する。
本研究では,本手法が定量的かつ定性的に,最先端の手法よりも優れていることを示す。
論文 参考訳(メタデータ) (2021-09-03T15:51:30Z) - Controllable Person Image Synthesis with Spatially-Adaptive Warped
Normalization [72.65828901909708]
制御可能な人物画像生成は、望ましい属性を持つ現実的な人間の画像を作成することを目的としている。
本稿では,学習フロー場とワープ変調パラメータを統合した空間適応型ワープ正規化(SAWN)を提案する。
本稿では,テクスチャ・トランスファータスクの事前学習モデルを洗練するための,新たな自己学習部分置換戦略を提案する。
論文 参考訳(メタデータ) (2021-05-31T07:07:44Z) - Learning Semantic Person Image Generation by Region-Adaptive
Normalization [81.52223606284443]
ポーズと外観の翻訳を扱う新しい2段階フレームワークを提案する。
第1段階では,対象意味解析マップを予測し,ポーズ転送の難しさを解消する。
第2段階では,領域適応正規化を組み込んだ新たな人物画像生成手法を提案する。
論文 参考訳(メタデータ) (2021-04-14T06:51:37Z) - Progressive and Aligned Pose Attention Transfer for Person Image
Generation [59.87492938953545]
本稿では,ある人物のポーズを対象のポーズに移す,新たなポーズ移動のための生成的広告ネットワークを提案する。
Pose-Attentional Transfer Block (PATB) と Aligned Pose-Attentional Transfer Bloc (APATB) の2種類のブロックを使用します。
Market-1501およびDeepFashionデータセットにおけるモデルの有効性を定量的および定性測定を用いて検証する。
論文 参考訳(メタデータ) (2021-03-22T07:24:57Z) - PISE: Person Image Synthesis and Editing with Decoupled GAN [64.70360318367943]
人像合成と編集のための新しい二段階生成モデルであるPISEを提案する。
ヒトのポーズ伝達では,まず対象のポーズに合わせた人間のパーシングマップを合成し,衣服の形状を表現する。
衣服の形状とスタイルを分離するため,地域ごとの符号化と正規化を共同で提案する。
論文 参考訳(メタデータ) (2021-03-06T04:32:06Z) - PoNA: Pose-guided Non-local Attention for Human Pose Transfer [105.14398322129024]
本稿では, 簡易ブロックを用いたGAN(Generative Adversarial Network)を用いた新しいポーズ転送手法を提案する。
我々のモデルはより鮮明でよりリアルな画像を生成するが、パラメータは少なく、速度も速い。
論文 参考訳(メタデータ) (2020-12-13T12:38:29Z) - Human Motion Transfer from Poses in the Wild [61.6016458288803]
人間の動き伝達の問題に対処し、基準映像からの動きを模倣する対象人物のための新しい動き映像を合成する。
推定ポーズを用いて2つのドメインをブリッジするビデオ間翻訳タスクである。
トレーニング中に見つからない線内ポーズシーケンスであっても、時間的に一貫性のある高品質なビデオを生成するための新しいポーズ・ツー・ビデオ翻訳フレームワークを提案する。
論文 参考訳(メタデータ) (2020-04-07T05:59:53Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。