論文の概要: SimMC: Simple Masked Contrastive Learning of Skeleton Representations
for Unsupervised Person Re-Identification
- arxiv url: http://arxiv.org/abs/2204.09826v1
- Date: Thu, 21 Apr 2022 00:19:38 GMT
- ステータス: 処理完了
- システム内更新日: 2022-04-22 12:35:50.304368
- Title: SimMC: Simple Masked Contrastive Learning of Skeleton Representations
for Unsupervised Person Re-Identification
- Title(参考訳): SimMC: 教師なしの人物再同定のためのスケルトン表現の簡単なマスキングコントラスト学習
- Authors: Haocong Rao and Chunyan Miao
- Abstract要約: SimMC(Simple Masked Contrastive Learning)フレームワークを提案する。
具体的には、各骨格配列内の骨格の特徴を完全に活用するために、まずマスク付きプロトタイプコントラスト学習(MPC)方式を考案する。
そこで我々は,サブシーケンス間のシーケンス内パターンの整合性を捉えるために,マスク付きシーケンス内コントラスト学習(MIC)を提案する。
- 参考スコア(独自算出の注目度): 63.903237777588316
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Recent advances in skeleton-based person re-identification (re-ID) obtain
impressive performance via either hand-crafted skeleton descriptors or skeleton
representation learning with deep learning paradigms. However, they typically
require skeletal pre-modeling and label information for training, which leads
to limited applicability of these methods. In this paper, we focus on
unsupervised skeleton-based person re-ID, and present a generic Simple Masked
Contrastive learning (SimMC) framework to learn effective representations from
unlabeled 3D skeletons for person re-ID. Specifically, to fully exploit
skeleton features within each skeleton sequence, we first devise a masked
prototype contrastive learning (MPC) scheme to cluster the most typical
skeleton features (skeleton prototypes) from different subsequences randomly
masked from raw sequences, and contrast the inherent similarity between
skeleton features and different prototypes to learn discriminative skeleton
representations without using any label. Then, considering that different
subsequences within the same sequence usually enjoy strong correlations due to
the nature of motion continuity, we propose the masked intra-sequence
contrastive learning (MIC) to capture intra-sequence pattern consistency
between subsequences, so as to encourage learning more effective skeleton
representations for person re-ID. Extensive experiments validate that the
proposed SimMC outperforms most state-of-the-art skeleton-based methods. We
further show its scalability and efficiency in enhancing the performance of
existing models. Our codes are available at https://github.com/Kali-Hac/SimMC.
- Abstract(参考訳): 骨格に基づく人物再識別(re-ID)の最近の進歩は、手作りの骨格記述子または深層学習パラダイムを用いた骨格表現学習を通じて、印象的なパフォーマンスを得る。
しかし、トレーニングには骨格前モデリングとラベル情報が必要であるため、これらの手法の適用性が制限される。
本稿では,非教師付き骨格に基づく人物再IDに着目し,非ラベル付き3次元骨格から人物再IDの効果的な表現を学習するための汎用的簡易マスケッドコントラスト学習(SimMC)フレームワークを提案する。
具体的には、各骨格配列内の骨格特徴を完全に活用するために、まず、マスク付きプロトタイプコントラスト学習(MPC)方式を考案し、最も典型的な骨格特徴(骨格のプロトタイプ)を、生の配列からランダムにマスキングされた異なるサブシーケンスからクラスタリングし、その特徴と異なるプロトタイプの類似性を対比し、ラベルを使わずに識別的骨格表現を学習する。
そこで,同一シーケンス内の異なるサブシーケンスが,運動連続性の性質により強い相関関係を享受することが多いことを考慮し,サブシーケンス間のシーケンス内パターン一貫性を捉えるためのマスク付きイントラシーケンスコントラスト学習(mic)を提案し,個人再識別のためのより効果的なスケルトン表現の学習を促す。
広範な実験により、提案されたsimmcが最先端のスケルトンベース手法よりも優れていることが確認された。
さらに,既存のモデルの性能向上におけるスケーラビリティと効率性を示す。
私たちのコードはhttps://github.com/kali-hac/simmcで利用可能です。
関連論文リスト
- SkeleTR: Towrads Skeleton-based Action Recognition in the Wild [86.03082891242698]
SkeleTRは骨格に基づく行動認識のための新しいフレームワークである。
まず、グラフ畳み込みによる各骨格配列の人体内骨格力学をモデル化する。
次に、スタック化されたTransformerエンコーダを使用して、一般的なシナリオにおけるアクション認識に重要な人物のインタラクションをキャプチャする。
論文 参考訳(メタデータ) (2023-09-20T16:22:33Z) - Hierarchical Skeleton Meta-Prototype Contrastive Learning with Hard
Skeleton Mining for Unsupervised Person Re-Identification [70.90142717649785]
本稿では,HSM(Hard Skeleton Mining)を用いた階層型非教師付きメタプロトタイプコントラストラーニング(Hi-MPC)手法を提案する。
原原型を複数の同種変換を伴うメタプロトタイプに変換することにより,原型固有の一貫性を学習し,人体再IDのより効果的な骨格特徴を捉える。
論文 参考訳(メタデータ) (2023-07-24T16:18:22Z) - SkeletonMAE: Graph-based Masked Autoencoder for Skeleton Sequence
Pre-training [110.55093254677638]
我々はSkeleton Sequence Learning(SSL)という,効率的なスケルトンシーケンス学習フレームワークを提案する。
本論文では,SkeletonMAEという非対称なグラフベースのエンコーダデコーダ事前学習アーキテクチャを構築する。
我々のSSLは、さまざまなデータセットにまたがってうまく一般化し、最先端の自己教師型スケルトンベースのアクション認識手法よりも優れています。
論文 参考訳(メタデータ) (2023-07-17T13:33:11Z) - SkeletonMAE: Spatial-Temporal Masked Autoencoders for Self-supervised
Skeleton Action Recognition [13.283178393519234]
自己監督型骨格に基づく行動認識が注目されている。
ラベルのないデータを利用することで、オーバーフィッティング問題を緩和するためにより一般化可能な特徴を学ぶことができる。
自己教師型3次元骨格に基づく行動認識のための空間時間マスク付きオートエンコーダフレームワークを提案する。
論文 参考訳(メタデータ) (2022-09-01T20:54:27Z) - Skeleton Prototype Contrastive Learning with Multi-Level Graph Relation
Modeling for Unsupervised Person Re-Identification [63.903237777588316]
3Dスケルトンによる人物再識別(re-ID)は多くの利点を持つ重要な話題である。
既存の解は骨格構造や運動における価値ある身体-成分関係を探索することは滅多にない。
本稿では,マルチレベルグラフ関係学習を用いた汎用的教師なし型コントラスト学習パラダイムを提案する。
論文 参考訳(メタデータ) (2022-08-25T00:59:32Z) - Skeleton-Contrastive 3D Action Representation Learning [35.06361753065124]
本稿では,骨格に基づく行動認識に適した特徴空間の自己教師型学習を目指す。
提案手法は,PKUデータセットとNTUデータセットのスケルトンデータからの自己教師付き学習における最先端性能を実現する。
論文 参考訳(メタデータ) (2021-08-08T14:44:59Z) - A Self-Supervised Gait Encoding Approach with Locality-Awareness for 3D
Skeleton Based Person Re-Identification [65.18004601366066]
3Dスケルトン配列内の歩行特徴による人物再識別(Re-ID)は、いくつかの利点を持つ新しい話題である。
本稿では、ラベルのない骨格データを利用して人物の歩行表現を学習できる自己教師付き歩行符号化手法を提案する。
論文 参考訳(メタデータ) (2020-09-05T16:06:04Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。