論文の概要: Semi-Supervised 2D Human Pose Estimation Driven by Position
Inconsistency Pseudo Label Correction Module
- arxiv url: http://arxiv.org/abs/2303.04346v1
- Date: Wed, 8 Mar 2023 02:57:05 GMT
- ステータス: 処理完了
- システム内更新日: 2023-03-09 15:20:12.938020
- Title: Semi-Supervised 2D Human Pose Estimation Driven by Position
Inconsistency Pseudo Label Correction Module
- Title(参考訳): 位置不整合擬似ラベル補正モジュールによる半教師付き2次元ポーズ推定
- Authors: Linzhi Huang, Yulong Li, Hongbo Tian, Yue Yang, Xiangang Li, Weihong
Deng, Jieping Ye
- Abstract要約: i) 大規模モデルと軽量モデルの間で対話的なトレーニングを行う場合, 大規模モデルのガイドに擬似的な軽量モデルラベルを用いる。
位置整合性擬似ラベル補正モジュール(SSPCM)により駆動される半教師付き2次元ポーズ推定フレームワークを提案する。
学生モデルの性能向上のために,擬似キーポイント認識に基づく半教師付きカットオクルードを用いて,より硬く効果的なサンプルを生成する。
- 参考スコア(独自算出の注目度): 74.80776648785897
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: In this paper, we delve into semi-supervised 2D human pose estimation. The
previous method ignored two problems: (i) When conducting interactive training
between large model and lightweight model, the pseudo label of lightweight
model will be used to guide large models. (ii) The negative impact of noise
pseudo labels on training. Moreover, the labels used for 2D human pose
estimation are relatively complex: keypoint category and keypoint position. To
solve the problems mentioned above, we propose a semi-supervised 2D human pose
estimation framework driven by a position inconsistency pseudo label correction
module (SSPCM). We introduce an additional auxiliary teacher and use the pseudo
labels generated by the two teacher model in different periods to calculate the
inconsistency score and remove outliers. Then, the two teacher models are
updated through interactive training, and the student model is updated using
the pseudo labels generated by two teachers. To further improve the performance
of the student model, we use the semi-supervised Cut-Occlude based on pseudo
keypoint perception to generate more hard and effective samples. In addition,
we also proposed a new indoor overhead fisheye human keypoint dataset
WEPDTOF-Pose. Extensive experiments demonstrate that our method outperforms the
previous best semi-supervised 2D human pose estimation method. We will release
the code and dataset at https://github.com/hlz0606/SSPCM.
- Abstract(参考訳): 本稿では,半教師付き2次元ポーズ推定について検討する。
以前の方法は2つの問題を無視した。
(i)大型モデルと軽量モデルの間でインタラクティブなトレーニングを行う場合、軽量モデルの擬似ラベルを使用して、大規模モデルのガイドを行う。
(ii)騒音擬似ラベルのトレーニングへの影響
さらに、2次元人間のポーズ推定に用いられるラベルは、キーポイントカテゴリとキーポイント位置という比較的複雑である。
上記の問題を解決するために,位置不整合擬似ラベル補正モジュール(sspcm)によって駆動される半教師付き2次元ポーズ推定フレームワークを提案する。
補助教師を新たに導入し,異なる期間に2つの教員モデルによって生成された擬似ラベルを用いて不一致スコアを算出し,外れ値の除去を行う。
そして、対話型トレーニングにより2つの教師モデルを更新し、2つの教師が生成した擬似ラベルを用いて生徒モデルを更新する。
学生モデルの性能向上のために,擬似キーポイント認識に基づく半教師付きカットオクルードを用いて,より硬く効果的なサンプルを生成する。
また,新しい屋内魚眼人キーポイントデータセット WEPDTOF-Pose も提案した。
大規模な実験により,本手法は従来の最良半教師付き2次元ポーズ推定法よりも優れていた。
コードとデータセットはhttps://github.com/hlz0606/SSPCMで公開します。
関連論文リスト
- TrajSSL: Trajectory-Enhanced Semi-Supervised 3D Object Detection [59.498894868956306]
Pseudo-labeling approach to semi-supervised learning は教師-学生の枠組みを採用する。
我々は、事前学習した動き予測モデルを活用し、擬似ラベル付きデータに基づいて物体軌跡を生成する。
提案手法は2つの異なる方法で擬似ラベル品質を向上する。
論文 参考訳(メタデータ) (2024-09-17T05:35:00Z) - Semi-supervised 2D Human Pose Estimation via Adaptive Keypoint Masking [2.297586471170049]
本稿では,サンプル中の情報を完全にマイニングし,より優れた推定性能が得られる適応型キーポイントマスキング法を提案する。
提案手法の有効性をCOCOとMPIIで検証し,最先端の半教師によるポーズ推定をそれぞれ5.2%と0.3%で上回った。
論文 参考訳(メタデータ) (2024-04-23T08:41:50Z) - Denoising and Selecting Pseudo-Heatmaps for Semi-Supervised Human Pose
Estimation [38.97427474379367]
ラベルのないデータから学習するターゲットとして,信頼度の高い擬似熱マップを生成するための認知スキームを導入する。
評価された学生間の不確実性によって導かれる擬似熱マップから学習対象を選択する。
提案手法は,従来の半教師付きポーズ推定装置よりも優れていた。
論文 参考訳(メタデータ) (2023-09-29T19:17:30Z) - Optimising 2D Pose Representation: Improve Accuracy, Stability and
Generalisability Within Unsupervised 2D-3D Human Pose Estimation [7.294965109944706]
2次元ポーズの最も最適な表現は2つの独立した部分(胴体と脚)であり、各リフトネットワーク間に共通な特徴はない。
その結果、2次元ポーズの最も最適な表現は2つの独立した部分(胴体と脚)であり、各リフトネットワーク間に共通な特徴はないことがわかった。
論文 参考訳(メタデータ) (2022-09-01T17:32:52Z) - Adapting the Mean Teacher for keypoint-based lung registration under
geometric domain shifts [75.51482952586773]
ディープニューラルネットワークは一般的に、ラベル付きトレーニングデータが多く必要であり、トレーニングデータとテストデータの間のドメインシフトに弱い。
本稿では,ラベル付きソースからラベル付きターゲットドメインへのモデルの適用により,画像登録のための幾何学的領域適応手法を提案する。
本手法は,ベースラインモデルの精度を目標データに適合させながら,ベースラインモデルの50%/47%を継続的に改善する。
論文 参考訳(メタデータ) (2022-07-01T12:16:42Z) - PoseTriplet: Co-evolving 3D Human Pose Estimation, Imitation, and
Hallucination under Self-supervision [102.48681650013698]
既存の自己監督型3次元ポーズ推定スキームは、学習を導くための弱い監督に大きく依存している。
そこで我々は,2D-3Dのポーズペアを明示的に生成し,監督を増強する,新しい自己監督手法を提案する。
これは、ポーズ推定器とポーズ幻覚器を併用して学習する強化学習ベースの模倣器を導入することで可能となる。
論文 参考訳(メタデータ) (2022-03-29T14:45:53Z) - X-model: Improving Data Efficiency in Deep Learning with A Minimax Model [78.55482897452417]
ディープラーニングにおける分類と回帰設定の両面でのデータ効率の向上を目標とする。
両世界の力を生かすために,我々は新しいX-モデルを提案する。
X-モデルは、特徴抽出器とタスク固有のヘッドの間でミニマックスゲームを行う。
論文 参考訳(メタデータ) (2021-10-09T13:56:48Z) - Learning Heatmap-Style Jigsaw Puzzles Provides Good Pretraining for 2D
Human Pose Estimation [19.389708889730834]
2次元ポーズ推定ネットワークを事前学習する自己教師あり方式を提案する。
具体的には、Heatmap-Style Jigsaw Puzzles(HSJP)問題をプリテキストタスクとして提案します。
私たちは、さらに大きなImageNetデータセットを導入するのではなく、MS-COCOの人物インスタンスの画像のみを使用します。
HRNetとSimpleBaselineの2つの人気かつ強力な2次元ポーズ推定器を用いて,MS-COCO検証とtest-devデータセットの両方でmAPスコアを評価する。
論文 参考訳(メタデータ) (2020-12-13T17:04:29Z) - DMT: Dynamic Mutual Training for Semi-Supervised Learning [69.17919491907296]
自己学習法は通常、低信頼の擬似ラベルをフィルタリングするために単一のモデル予測の信頼性に依存する。
動的相互学習と呼ばれる動的に再重み付けされた損失関数を用いて、2つの異なるモデル間の相互学習を提案する。
実験の結果,DMTは画像分類とセマンティックセグメンテーションの両方において最先端の性能を実現することがわかった。
論文 参考訳(メタデータ) (2020-04-18T03:12:55Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。