論文の概要: Predictively Encoded Graph Convolutional Network for Noise-Robust
Skeleton-based Action Recognition
- arxiv url: http://arxiv.org/abs/2003.07514v1
- Date: Tue, 17 Mar 2020 03:37:36 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-22 21:03:53.050783
- Title: Predictively Encoded Graph Convolutional Network for Noise-Robust
Skeleton-based Action Recognition
- Title(参考訳): ノイズロバスト骨格に基づく行動認識のための予測符号化グラフ畳み込みネットワーク
- Authors: Jongmin Yu, Yongsang Yoon, and Moongu Jeon
- Abstract要約: 本研究では,骨格特徴の雑音情報に対して頑健な骨格に基づく行動認識手法を提案する。
本手法は, 既存の最先端手法と比較して, スケルトンサンプルがノイズを受ける場合の優れた性能を実現する。
- 参考スコア(独自算出の注目度): 6.729108277517129
- License: http://creativecommons.org/licenses/by-nc-sa/4.0/
- Abstract: In skeleton-based action recognition, graph convolutional networks (GCNs),
which model human body skeletons using graphical components such as nodes and
connections, have achieved remarkable performance recently. However, current
state-of-the-art methods for skeleton-based action recognition usually work on
the assumption that the completely observed skeletons will be provided. This
may be problematic to apply this assumption in real scenarios since there is
always a possibility that captured skeletons are incomplete or noisy. In this
work, we propose a skeleton-based action recognition method which is robust to
noise information of given skeleton features. The key insight of our approach
is to train a model by maximizing the mutual information between normal and
noisy skeletons using a predictive coding manner. We have conducted
comprehensive experiments about skeleton-based action recognition with defected
skeletons using NTU-RGB+D and Kinetics-Skeleton datasets. The experimental
results demonstrate that our approach achieves outstanding performance when
skeleton samples are noised compared with existing state-of-the-art methods.
- Abstract(参考訳): スケルトンに基づく行動認識では、ノードや接続といったグラフィカルなコンポーネントを用いて人体骨格をモデル化するグラフ畳み込みネットワーク(GCN)が、近年顕著なパフォーマンスを実現している。
しかしながら、現在の骨格に基づく行動認識の最先端の手法は、完全に観察された骨格が提供されるという仮定で通常機能する。
捕獲された骨格が不完全かノイズである可能性は常にあるので、実際のシナリオでこの仮定を適用するのは問題になるかもしれない。
本研究では,骨格特徴の雑音情報に対して頑健な骨格に基づく行動認識手法を提案する。
提案手法の重要な洞察は,予測的符号化手法を用いて,正常骨格と雑音骨格の相互情報を最大化することによりモデルを訓練することである。
我々は,NTU-RGB+DとKineetics-Skeletonデータセットを用いた骨格型行動認識の包括的実験を行った。
実験の結果,スケルトン標本が従来の手法に比べてノイズが多い場合,優れた性能が得られることがわかった。
関連論文リスト
- Expressive Keypoints for Skeleton-based Action Recognition via Skeleton Transformation [14.033701085783177]
我々は,手と足の詳細を組み込んだ表現的キーポイントを提案し,複雑な動作を識別する既存のモデルの識別能力を向上させる。
プラグアンドプレイのインスタンスプールモジュールは、計算コストを増大させることなく、マルチパーソンシナリオにアプローチを拡張するために利用されます。
論文 参考訳(メタデータ) (2024-06-26T01:48:56Z) - SkeleTR: Towrads Skeleton-based Action Recognition in the Wild [86.03082891242698]
SkeleTRは骨格に基づく行動認識のための新しいフレームワークである。
まず、グラフ畳み込みによる各骨格配列の人体内骨格力学をモデル化する。
次に、スタック化されたTransformerエンコーダを使用して、一般的なシナリオにおけるアクション認識に重要な人物のインタラクションをキャプチャする。
論文 参考訳(メタデータ) (2023-09-20T16:22:33Z) - SkeletonMAE: Graph-based Masked Autoencoder for Skeleton Sequence
Pre-training [110.55093254677638]
我々はSkeleton Sequence Learning(SSL)という,効率的なスケルトンシーケンス学習フレームワークを提案する。
本論文では,SkeletonMAEという非対称なグラフベースのエンコーダデコーダ事前学習アーキテクチャを構築する。
我々のSSLは、さまざまなデータセットにまたがってうまく一般化し、最先端の自己教師型スケルトンベースのアクション認識手法よりも優れています。
論文 参考訳(メタデータ) (2023-07-17T13:33:11Z) - One-Shot Action Recognition via Multi-Scale Spatial-Temporal Skeleton
Matching [77.6989219290789]
ワンショットスケルトン行動認識は、単一のトレーニングサンプルでスケルトン行動認識モデルを学ぶことを目的としている。
本稿では,マルチスケールな時空間特徴マッチングによる骨格行動認識を行う新しい一発骨格行動認識手法を提案する。
論文 参考訳(メタデータ) (2023-07-14T11:52:10Z) - SimMC: Simple Masked Contrastive Learning of Skeleton Representations
for Unsupervised Person Re-Identification [63.903237777588316]
SimMC(Simple Masked Contrastive Learning)フレームワークを提案する。
具体的には、各骨格配列内の骨格の特徴を完全に活用するために、まずマスク付きプロトタイプコントラスト学習(MPC)方式を考案する。
そこで我々は,サブシーケンス間のシーケンス内パターンの整合性を捉えるために,マスク付きシーケンス内コントラスト学習(MIC)を提案する。
論文 参考訳(メタデータ) (2022-04-21T00:19:38Z) - Joint-bone Fusion Graph Convolutional Network for Semi-supervised
Skeleton Action Recognition [65.78703941973183]
本稿では,CD-JBF-GCNをエンコーダとし,ポーズ予測ヘッドをデコーダとして使用する新しい相関駆動型ジョイントボーン・フュージョングラフ畳み込みネットワークを提案する。
具体的には、CD-JBF-GCは、関節ストリームと骨ストリームの間の運動伝達を探索することができる。
自己教師型トレーニング段階におけるポーズ予測に基づくオートエンコーダにより、未ラベルデータから動作表現を学習することができる。
論文 参考訳(メタデータ) (2022-02-08T16:03:15Z) - Skeleton-Contrastive 3D Action Representation Learning [35.06361753065124]
本稿では,骨格に基づく行動認識に適した特徴空間の自己教師型学習を目指す。
提案手法は,PKUデータセットとNTUデータセットのスケルトンデータからの自己教師付き学習における最先端性能を実現する。
論文 参考訳(メタデータ) (2021-08-08T14:44:59Z) - UNIK: A Unified Framework for Real-world Skeleton-based Action
Recognition [11.81043814295441]
UNIKは、データセットをまたいで一般化できる新しい骨格に基づく行動認識手法である。
実世界のビデオにおける行動認識のクロスドメイン一般化可能性について検討するため,提案したUNIKと同様に最先端のアプローチを再評価する。
その結果,提案したUNIKは,Poseticsを事前学習した上で,4つのターゲットアクション分類データセットに転送した場合に,最先端の処理性能を向上することがわかった。
論文 参考訳(メタデータ) (2021-07-19T02:00:28Z) - JOLO-GCN: Mining Joint-Centered Light-Weight Information for
Skeleton-Based Action Recognition [47.47099206295254]
本稿では,2ストリームグラフ畳み込みネットワークにおいて,人間のポーズスケルトンと共同中心の軽量情報を活用するための新しいフレームワークを提案する。
純粋なスケルトンベースのベースラインと比較して、このハイブリッドスキームは、計算とメモリのオーバーヘッドを低く保ちながら、性能を効果的に向上させる。
論文 参考訳(メタデータ) (2020-11-16T08:39:22Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。