論文の概要: MER-GCN: Micro Expression Recognition Based on Relation Modeling with
Graph Convolutional Network
- arxiv url: http://arxiv.org/abs/2004.08915v1
- Date: Sun, 19 Apr 2020 17:25:30 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-12 00:22:13.632501
- Title: MER-GCN: Micro Expression Recognition Based on Relation Modeling with
Graph Convolutional Network
- Title(参考訳): MER-GCN:グラフ畳み込みネットワークを用いた関係モデルに基づくマイクロ表現認識
- Authors: Ling Lo, Hong-Xia Xie, Hong-Han Shuai, Wen-Huang Cheng
- Abstract要約: 本稿では、3D ConvNets を用いて AU 特徴を抽出し、GCN 層を適用して ME 分類のための AU ノード間の依存関係の探索を行う、エンドツーエンドな AU グラフ分類ネットワーク MER-GCN を提案する。
我々の知る限り、この研究はAUsベースのGCNを用いたMER(Micro-Expression Recognition)のための最初のエンドツーエンドアーキテクチャである。
- 参考スコア(独自算出の注目度): 24.69269586706002
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Micro-Expression (ME) is the spontaneous, involuntary movement of a face that
can reveal the true feeling. Recently, increasing researches have paid
attention to this field combing deep learning techniques. Action units (AUs)
are the fundamental actions reflecting the facial muscle movements and AU
detection has been adopted by many researches to classify facial expressions.
However, the time-consuming annotation process makes it difficult to correlate
the combinations of AUs to specific emotion classes. Inspired by the nodes
relationship building Graph Convolutional Networks (GCN), we propose an
end-to-end AU-oriented graph classification network, namely MER-GCN, which uses
3D ConvNets to extract AU features and applies GCN layers to discover the
dependency laying between AU nodes for ME categorization. To our best
knowledge, this work is the first end-to-end architecture for Micro-Expression
Recognition (MER) using AUs based GCN. The experimental results show that our
approach outperforms CNN-based MER networks.
- Abstract(参考訳): マイクロ・エクスプレッション(ME: Micro-Expression)は、顔の自然な不随意運動であり、真の感覚を明らかにすることができる。
近年,この分野に深層学習技術を取り入れた研究が増えている。
行動単位 (aus) は顔面筋運動を反映する基本的な作用であり、au検出は多くの研究で表情の分類に採用されている。
しかし、時間を要するアノテーションプロセスは、AUの組み合わせを特定の感情クラスに関連付けるのが難しくなる。
グラフ畳み込みネットワーク(GCN, Graph Convolutional Networks)を構築するノード間の関係から着想を得て, 3D ConvNets を用いて AU 特徴を抽出し,GCN 層を適用して AU ノード間の依存性の発見を行う,エンドツーエンドの AU グラフ分類ネットワーク MER-GCN を提案する。
我々の知る限り、この研究はAUsベースのGCNを用いたMER(Micro-Expression Recognition)のための最初のエンドツーエンドアーキテクチャである。
実験の結果,提案手法はCNNベースのMERネットワークよりも優れていた。
関連論文リスト
- AU-aware graph convolutional network for Macro- and Micro-expression
spotting [44.507747407072685]
我々はAUW-GCN(Action-Unit-aWare Graph Convolutional Network)と呼ばれるグラフ畳み込み型ネットワークを提案する。
先行情報を注入し、小さなデータセットの問題に対処するために、AU関連統計データをネットワークにエンコードする。
その結果, 2つのベンチマークデータセットにおいて, ベースライン手法を一貫して向上させ, 新たなSOTA性能を実現することができた。
論文 参考訳(メタデータ) (2023-03-16T07:00:36Z) - Motif-based Graph Representation Learning with Application to Chemical
Molecules [11.257235936629689]
既存のグラフニューラルネットワークは、局所的な構造的コンテキスト内で複雑な相互作用をキャプチャする限られた能力を提供する。
局所構造情報をよりよく活用するためのモチーフに基づくグラフ表現学習手法を提案する。
MCMは、教師なしの方法でモチーフ語彙を構築し、新しいモチーフ畳み込み操作を展開し、局所構造コンテキストを抽出する。
論文 参考訳(メタデータ) (2022-08-09T03:37:37Z) - Automatic Relation-aware Graph Network Proliferation [182.30735195376792]
GNNを効率的に検索するためのARGNP(Automatic Relation-Aware Graph Network Proliferation)を提案する。
これらの操作は階層的なノード/リレーショナル情報を抽出し、グラフ上のメッセージパッシングのための異方的ガイダンスを提供する。
4つのグラフ学習タスクのための6つのデータセットの実験により、我々の手法によって生成されたGNNは、現在最先端の手作りおよび検索に基づくGNNよりも優れていることが示された。
論文 参考訳(メタデータ) (2022-05-31T10:38:04Z) - HAN: An Efficient Hierarchical Self-Attention Network for Skeleton-Based
Gesture Recognition [73.64451471862613]
骨格に基づくジェスチャー認識のための効率的な階層型自己認識ネットワーク(HAN)を提案する。
ジョイント・セルフアテンション・モジュールは指の空間的特徴を捉え、指の自己アテンション・モジュールは手全体の特徴を集約するように設計されている。
実験の結果,3つのジェスチャ認識データセットに対して,計算複雑性がはるかに低い競合的な結果が得られることがわかった。
論文 参考訳(メタデータ) (2021-06-25T02:15:53Z) - Higher-Order Attribute-Enhancing Heterogeneous Graph Neural Networks [67.25782890241496]
異種ネットワーク表現学習のための高次属性強化グラフニューラルネットワーク(HAEGNN)を提案する。
HAEGNNは、リッチで異質なセマンティクスのためのメタパスとメタグラフを同時に組み込む。
ノード分類、ノードクラスタリング、可視化における最先端の手法よりも優れたパフォーマンスを示す。
論文 参考訳(メタデータ) (2021-04-16T04:56:38Z) - Learning the Implicit Semantic Representation on Graph-Structured Data [57.670106959061634]
グラフ畳み込みネットワークにおける既存の表現学習手法は主に、各ノードの近傍を知覚全体として記述することで設計される。
本稿では,グラフの潜在意味パスを学習することで暗黙的な意味を探索する意味グラフ畳み込みネットワーク(sgcn)を提案する。
論文 参考訳(メタデータ) (2021-01-16T16:18:43Z) - Objective Class-based Micro-Expression Recognition through Simultaneous
Action Unit Detection and Feature Aggregation [18.35953886595087]
目的クラスに基づくマイクロ圧縮認識(MER)のための新しいディープニューラルネットワークモデルを提案する。
我々のモデルは同時にアクションユニット(AU)を検出し、AUレベルの特徴をマイクロ圧縮レベル表現に集約する。
私たちのアプローチは、MERの現在の最新技術を大幅に上回ります。
論文 参考訳(メタデータ) (2020-12-24T07:31:15Z) - Video-based Facial Expression Recognition using Graph Convolutional
Networks [57.980827038988735]
我々は、ビデオベースの表情認識のための共通のCNN-RNNモデルに、GCN(Graph Convolutional Network)層を導入する。
我々は、CK+、Oulu-CASIA、MMIの3つの広く使われているデータセットと、AFEW8.0の挑戦的なワイルドデータセットについて、本手法の評価を行った。
論文 参考訳(メタデータ) (2020-10-26T07:31:51Z) - Multi-Level Graph Convolutional Network with Automatic Graph Learning
for Hyperspectral Image Classification [63.56018768401328]
HSI分類のための自動グラフ学習法(MGCN-AGL)を用いたマルチレベルグラフ畳み込みネットワーク(GCN)を提案する。
空間的に隣接する領域における重要度を特徴付けるために注意機構を利用することで、最も関連性の高い情報を適応的に組み込んで意思決定を行うことができる。
MGCN-AGLは局所的に生成した表現表現に基づいて画像領域間の長距離依存性を符号化する。
論文 参考訳(メタデータ) (2020-09-19T09:26:20Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。